Porco Uma plataforma para analisar grandes conjuntos de dados
Baixe Agora

Porco Classificação e resumo

Porco Tag

programação analisador dados analisador de dados Avaliador do programa

Porco Descrição

Uma plataforma para analisar grandes conjuntos de dados O porco é um projeto para analisar grandes conjuntos de dados que consistem em uma linguagem de alto nível para expressar programas de análise de dados, juntamente com infraestrutura para avaliar esses programas. A propriedade saliente dos programas de porcos é que sua estrutura é passível de paralelização substancial, que em turnos permite lhes lidar com conjuntos de dados muito grandes.at o tempo presente, a camada de infraestrutura do porco consiste em um compilador que produz sequências de programas de redução de mapas, quais implementações paralelas em larga escala já existem (por exemplo, o subprojeto do Hadoop). A camada de idioma do porco é atualmente consiste em uma linguagem textual chamada latim do porco, que tem as seguintes propriedades importantes: * Facilidade de programação. É trivial alcançar a execução paralela de tarefas de análise de dados simples e "embaraçosamente paralelamente paralelamente". Tarefas complexas compostas de várias transformações de dados inter-relacionadas são explicitamente codificadas como seqüências de fluxo de dados, tornando-as fáceis de escrever, entender e manter. * Oportunidades de otimização. A maneira como as tarefas são codificadas permite que o sistema otimize sua execução automaticamente, permitindo que o usuário se concentre em semântica em vez de eficiência. * Extensibilidade. Os usuários podem criar suas próprias funções para fazer processamento especial. O que há de novo nesta versão: · Esta versão inclui melhorias de uso de desempenho e memória, adiciona a interface do acumulador para UDFs e contém muitas correções de bugs. · Esta versão funciona com Hadoop 0,20.

Porco Software Relacionado