Novidades BigQuery: Graph Modeler, IA e Mais!

Novidades BigQuery: Graph Modeler, IA e Mais!

BigQuery Inova: Ferramentas de IA e Modelagem Gráfica Ganham Destaque

Em atualizações recentes, o Google Cloud BigQuery tem expandido suas capacidades, focando em facilitar a análise de dados e a integração com inteligência artificial. As novidades prometem otimizar fluxos de trabalho e introduzir novas maneiras de interagir com os dados.

Visual Graph Modeler: Navegando por Dados em Rede

Uma das principais novidades é a introdução do visual graph modeler no BigQuery Studio. Esta ferramenta permite definir nós e arestas de grafos diretamente de suas tabelas do BigQuery, além de editar o esquema do grafo. Essa funcionalidade, atualmente em fase de Preview, abre portas para a visualização e análise de dados relacionais de forma mais intuitiva.

Evolução dos Serviços Google Cloud

Houve também uma série de renomeações estratégicas em produtos do Google Cloud:

  • Dataproc agora é conhecido como Managed Service for Apache Spark. Essa mudança reflete a natureza do serviço, embora os nomes de APIs e recursos associados permaneçam os mesmos.
  • BigLake foi renomeado para Google Cloud Lakehouse, e o BigLake metastore agora é chamado de Lakehouse runtime catalog. Novamente, as referências em APIs e ferramentas de gerenciamento ainda apontam para BigLake.
  • O Dataplex Universal Catalog foi atualizado para Knowledge Catalog. A API, bibliotecas de cliente e CLI mantêm seus nomes originais.
  • Looker Studio foi renomeado de volta para Data Studio. Embora o endpoint mude para datastudio.google.com, os relatórios existentes não exigirão atualização, pois a redireção é automática. Empresas que utilizam proxies precisam atualizar suas listas de controle de acesso.

BigQuery Graphs: Mais Capacidades e Inteligência

Os BigQuery graphs foram aprimorados com novos recursos, também em fase de Preview:

  • Consultas em Linguagem Natural: Agora é possível consultar grafos utilizando linguagem natural através do Conversational Analytics.
  • Descrições e Sinônimos: Foi adicionado suporte para descrições e sinônimos em rótulos e propriedades de grafos, facilitando a compreensão e o acesso.
  • Definição de Medidas: Para certos tipos de grafos, é possível definir medidas, que bloqueiam uma agregação a uma chave, permitindo agregações complexas sem contagens indevidas. A consulta dessas medidas é feita após a transformação do grafo com a função GRAPH_EXPAND.

Inteligência Artificial Integrada

A integração com IA no BigQuery foi fortalecida com o modelo gemini-embedding-2-preview. Este modelo, disponível em Preview, permite gerar embeddings únicos a partir de uma combinação de diferentes tipos de dados, incluindo texto, imagem, áudio, vídeo e PDFs, utilizando as funções AI.EMBED, AI.SIMILARITY, AI.GENERATE_EMBEDDING e ML.GENERATE_EMBEDDING.

Agente de Engenharia de Dados: Automação de Pipelines

Em fase de Disponibilidade Geral (GA), o Data Engineering Agent agora está disponível para auxiliar na construção, modificação e solução de problemas em pipelines de dados dentro do BigQuery, simplificando o gerenciamento de fluxos de dados complexos.

Essas atualizações demonstram o compromisso do Google Cloud em evoluir suas ofertas de dados, proporcionando ferramentas mais poderosas e acessíveis para análise, modelagem e inteligência artificial.

Fundamentos de Engenharia de Dados: Projete e Construa Sistemas de Dados Robustos
Recomendado pelo autor

Fundamentos de Engenharia de Dados: Projete e Construa Sistemas de Dados Robustos
* Link de afiliado — o preço pode variar. Ao comprar, você apoia este blog sem custo extra.

Decifrando Arquiteturas de Dados: Escolhendo entre data warehouse moderno, data fabric, data lakehouse e data mesh
Recomendado pelo autor

Decifrando Arquiteturas de Dados: Escolhendo entre data warehouse moderno, data fabric, data lakehouse e data mesh
* Link de afiliado — o preço pode variar. Ao comprar, você apoia este blog sem custo extra.

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *