View a markdown version of this page

O que éAWS Glue DataBrew? - AWS Glue DataBrew Guia do Desenvolvedor

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

O que éAWS Glue DataBrew?

AWS Glue DataBrewé uma ferramenta visual de preparação de dados que permite aos usuários limpar e normalizar dados sem escrever nenhum código. O uso DataBrew ajuda a reduzir o tempo necessário para preparar dados para análise e aprendizado de máquina (ML) em até 80%, em comparação com a preparação de dados desenvolvida de forma personalizada. Você pode escolher entre mais de 250 transformações prontas para automatizar tarefas de preparação de dados, como filtrar anomalias, converter dados em formatos padrão e corrigir valores inválidos.

Usando DataBrew, analistas de negócios, cientistas de dados e engenheiros de dados podem colaborar mais facilmente para obter insights de dados brutos. Por ser DataBrew sem servidor, não importa qual seja seu nível técnico, você pode explorar e transformar terabytes de dados brutos sem precisar criar clusters ou gerenciar qualquer infraestrutura.

Com a DataBrew interface intuitiva, você pode descobrir, visualizar, limpar e transformar dados brutos de forma interativa. DataBrew faz sugestões inteligentes para ajudá-lo a identificar problemas de qualidade de dados que podem ser difíceis de encontrar e demorados de corrigir. DataBrew Ao preparar seus dados, você pode usar seu tempo para agir sobre os resultados e iterar mais rapidamente. Você pode salvar a transformação como etapas em uma receita, que pode ser atualizada ou reutilizada posteriormente com outros conjuntos de dados e implantá-la continuamente.

A imagem a seguir mostra como DataBrew funciona em alto nível.

Um diagrama simples sobre como DataBrew funciona. DataBrew pode limpar, preparar e transformar dados visualmente sem a necessidade de escrever código. Uma caixa mostra os dados DataBrew inseridos do Amazon S3. Ele mostra caixas para algumas das transformações que DataBrew podem ser feitas. As caixas de transformação incluem o seguinte: Formatar, limpar e padronizar dados. Reestruture e transforme dados. Lide com dados ausentes e inválidos. Manipule variáveis categóricas. Lide com variáveis numéricas. Use processamento de linguagem natural. O diagrama mostra que os dados são exportados para o S3 como um conjunto de dados preparado.

Para usar DataBrew, você cria um projeto e se conecta aos seus dados. No espaço de trabalho do projeto, você vê seus dados exibidos em uma interface visual em forma de grade. Aqui, você pode explorar os dados e ver distribuições de valores e gráficos para entender seu perfil.

Para preparar os dados, você pode escolher entre mais de 250 transformações de apontar e clicar. Isso inclui remover nulos, substituir valores ausentes, corrigir inconsistências de esquema, criar colunas com base em funções e muito mais. Você também pode usar transformações para aplicar técnicas de processamento de linguagem natural (PNL) para dividir frases em frases. As visualizações imediatas mostram uma parte dos seus dados antes e depois da transformação, para que você possa modificar sua receita antes de aplicá-la a todo o conjunto de dados.

Depois DataBrew de executar sua receita em seu conjunto de dados, a saída é armazenada no Amazon Simple Storage Service (Amazon S3). Depois que seu conjunto de dados limpo e preparado estiver no Amazon S3, outro dos seus sistemas de armazenamento ou gerenciamento de dados poderá ingeri-lo.