Veja o que sua IA vê: Rastreamento Multimodal para Imagens, Áudio e Arquivos
Traduzido do original em inglês por IA. Ver em inglês
A Databricks agora oferece suporte a rastreamento multimodal para imagens, áudio e arquivos, permitindo que você visualize e interaja com esses artefatos diretamente em seus rastreamentos, em vez de strings base64 opacas. Essa melhoria aprimora a depuração para agentes GenAI, reduz custos de armazenamento e acelera as consultas de rastreamento, evitando o armazenamento direto de grandes strings multimídia.
Seu agente analisa imagens, transcreve áudio e processa PDFs. Mas quando algo dá errado, seus rastreamentos mostram apenas strings base64 opacas: megabytes de iVBORw0KGgo... enterrados em JSON. Você pode ver que uma imagem foi enviada, mas não o que estava nela. Você pode ver que o áudio foi retornado, mas não pode reproduzi-lo. E cada uma dessas strings de vários megabytes é armazenada diretamente em seu banco de dados de rastreamento, inflando os custos de armazenamento e diminuindo a velocidade das consultas.