Assistência com IA generativa
Acelerar a integração de dados e aumentar a produtividade do desenvolvedor
Ajuda de IA no AWS Glue
Benefícios
Integre dados com mais rapidez
A integração de dados em várias fontes pode levar dias ou até meses. O recurso de integração de dados do Amazon Q Developer ajuda você a criar trabalhos de integração de dados com o mínimo de conhecimento de integração de dados ou experiência em codificação. Ele abstrai as tarefas manuais para que você possa dedicar menos tempo ao trabalho rotineiro e mais tempo à análise de dados.
Diga ao Amazon Q Developer o que você precisa em inglês e ele retornará um trabalho completo para você. Por exemplo, com o recurso de integração de dados, você pode solicitar ao Amazon Q Developer para “ler arquivos JSON do S3, unir em ‘accountid’ e carregar no DynamoDB” e, em resposta, ele retornará uma tarefa de integração de dados de ponta a ponta que pode realizar essa ação. Você pode revisar o trabalho gerado, testá-lo em conjuntos de dados de amostra e movê-lo para a produção.
Melhore a produtividade do desenvolvedor
Criar trabalhos de integração de dados é apenas o começo. Depois que um trabalho é criado e implantado em produção, você deve mantê-lo e solucionar seus problemas. Os erros podem estar relacionados à conexão, ambiente, sintaxe, validação ou execução. Eles podem ocorrer quando você cria, testa, publica ou executa seus trabalhos de integração. A resolução de problemas geralmente requer a análise minuciosa de arquivos de log e o login em painéis de monitoramento.
Agora, o AWS Glue oferece recursos baseados em IA para modernizar seus trabalhos no Spark e agilizar a solução de problemas. Atualize automaticamente para versões mais recentes do Spark e obtenha diagnósticos inteligentes quando ocorrerem problemas, reduzindo o tempo de depuração de dias para minutos.
Obtenha ajuda especializada instantaneamente
O AWS Glue oferece assistência baseada em IA durante todo o ciclo de vida da integração de dados. Criado com profundo conhecimento de domínio do AWS Glue, ele oferece orientação especializada para qualquer coisa relacionada à integração de dados.
Em vez de esperar por especialistas em sua organização ou contratar um consultor, você pode entrar em contato com o Amazon Q Developer a qualquer momento por meio do console AWS Glue, do AWS Glue Studio ou da API. A capacidade de integração de dados do Amazon Q Developer é otimizada para uso com outros serviços da AWS. Você pode criar facilmente trabalhos que extraem, transformam e carregam dados armazenados no Amazon DynamoDB, Amazon DocumentDB, Amazon Managed Streaming para Apache Kafka, Amazon Kinesis, Amazon Redshift e Amazon S3.
Execute upgrades do Spark com facilidade
O agente de upgrade do Apache Spark identifica automaticamente as alterações da API e as modificações comportamentais nos aplicativos PySpark e Scala. Os engenheiros podem iniciar atualizações diretamente do SageMaker Unified Studio ou do IDE de sua escolha com a ajuda da compatibilidade com o MCP (Model Context Protocol). Durante o processo de upgrade, o agente analisa o código existente e sugere mudanças específicas, e os engenheiros podem revisar e aprovar antes da implementação. O agente valida a correção funcional por meio de validações de qualidade de dados. O agente atualmente é compatível com upgrades do Spark 2.4 para o 3.5 e mantém a precisão do processamento de dados durante todo o processo de upgrade.
Casos de uso
IA para integração de dados
Gere trabalhos de ETL prontos para produção simplesmente descrevendo os requisitos em inglês simples. Engenheiros e analistas de dados podem criar rapidamente fluxos de trabalho de integração de dados sem ter experiência profunda em Apache Spark. Obtenha um código completo e executável para cenários comuns, como unir conjuntos de dados, agregar dados e carregamento em vários serviços da AWS.
Saiba mais sobre a integração de dados da Amazon Q.
Analise e atualize automaticamente os trabalhos do Spark para versões mais recentes, mantendo a funcionalidade. O AWS Glue lida com a complexidade de identificar e atualizar scripts, configurações e dependências, reduzindo o tempo das atualizações de projetos de meses para dias. Isso permite o aproveitamentos dos atributos mais recentes do Spark e as melhorias de segurança sem esforço manual.
Saiba mais sobre atualizações com IA generativa para o Apache Spark.
Saiba mais sobre a solução de problemas com IA generativa para o Apache Spark.
Agilize seus upgrades de versão do Apache Spark no Amazon EMR e no AWS Glue de meses para semanas com nosso agente de automação inteligente que lida com análises e transformações complexas de código. Por meio de uma interface conversacional intuitiva, os engenheiros podem expressar os requisitos de upgrade naturalmente, mantendo o controle total sobre as modificações do código, eliminando a carga tradicional da análise manual de APIs, resolução de conflitos e validação de aplicativos.
Você encontrou o que estava procurando hoje?
Informe-nos para que possamos melhorar a qualidade do conteúdo em nossas páginas