Refinar em aberto

Leitura recomendada

OpenRefine é uma ferramenta excitante de código aberto que fornece uma solução convincente para transformar e compreender dados, e limpar dados não estruturados. Uma vez que os dados estejam limpos, OpenRefine os reconcilia em uma forma que esteja pronta para uso.

A solução é mantida pelo Code for Science & Society. É uma ferramenta de energia web de código aberto, baseada em Java, que tem alguma funcionalidade que amamos!
OpenRefine pode obter dados de todos os formatos de planilhas eletrônicas comumente usados, como CSV, TSV, Excel, JSON, e XML. Os dados podem ser importados localmente de um computador, endereços web ou banco de dados.

OpenRefine é uma plataforma web com uma série de recursos para ajudar na exploração de dados. Uma vez carregados, seus dados são analisados e removem as inconsistências para que o usuário possa entender as anomalias e ampliar os dados.

Outra característica que amamos é como ele ajuda na limpeza de conjuntos de dados, convertendo-os em diferentes formatos e limpando pontos de dados indesejados ou errôneos. A plataforma pode lidar com milhões de filas de conjuntos de dados - ela funcionará tão rápido quanto a memória de seu computador permitir!

Um aspecto do OpenRefine que realmente chamou nossa atenção foi a capacidade de reconciliar dados. A solução pode ligar e ampliar seu conjunto de dados com vários serviços web. Esta não é uma tarefa pequena, e há um trabalho sério acontecendo nos bastidores aqui.

Por exemplo, você pode ter um conjunto de dados com vários idiomas no texto de entrada. O OpenRefine integrou o Google Translate para detectar qual idioma está sendo usado no texto de entrada e depois mapeia cada idioma definido para um código de idioma.

O OpenRefine é de fonte aberta sob licença BSD e amado pela comunidade com mais de 7.500+ estrelas GitHub.

Para mais recursos e produtos de código aberto que amamos, visite a página formsflow.ai no GitHub.