Redefinindo o banco de dados para AI: por que o MongoDB adquiriu a Voyage AI

A AI está remodelando setores, redefinindo as experiências dos clientes e transformando a forma como as empresas inovam, operam e competem entre si. Embora grande parte do foco esteja nos modelos de ponta, um desafio fundamental está nos dados: como eles são armazenados, extraídos e se tornam úteis para aplicativos de AI. A democratização de softwares baseados em AI depende de um desenvolvimento a partir dos aspectos abstratos certos, mas, atualmente, criar aplicativos de AI úteis, em tempo real e em escala não é viável para a maioria das organizações.

O desafio não é apenas a complexidade, mas sim a confiança. Modelos de AI são probabilísticos, o que significa que seus resultados não são determinísticos e previsíveis. Isso é fácil de notar no problema de alucinação dos chatbots atuais, e fica ainda mais crucial com o surgimento de agentes, em que os sistemas de AI tomam decisões de forma autônoma. As equipes de desenvolvimento precisam ter a capacidade de controlar, moldar e fundamentar os resultados gerados para se alinharem com seus objetivos e garantir a precisão.

A busca e recuperação impulsionada por AI é uma ferramenta poderosa que extrai dados contextuais relevantes de fontes específicas, aprimorando modelos de AI para gerar respostas confiáveis e precisas ou tomar atitudes responsáveis e seguras, como visto na abordagem proeminente de geração aumentada por recuperação (RAG). No centro da recuperação impulsionada por AI estão a geração de incorporações e a reclassificação: dois componentes principais da AI que captam o significado semântico dos dados e avaliam a relevância de queries e resultados. Acreditamos que a geração de incorporações e a reclassificação, assim como a pesquisa impulsionada por AI, devem estar na camada de banco de dados, simplificando a pilha e criando uma base mais confiável para aplicativos de AI. Ao trazer mais inteligência para o banco de dados, ajudamos as empresas a mitigar alucinações, melhorar a confiabilidade e liberar todo o potencial da AI em grande escala.

Os aplicativos mais impactantes exigem uma base de dados flexível, inteligente e dimensionável. É por isso que estamos animados em anunciar a aquisição da Voyage AI, líder em modelos de incorporação e reclassificação que melhoram drasticamente a precisão por meio de pesquisa e recuperação impulsionadas por AI. Essa mudança não se trata apenas de adicionar funcionalidades de AI, mas também de redefinir o banco de dados para a era da AI.

Por que isso importa: o futuro da AI é criado com base em uma maior relevância e precisão dos dados

A AI é probabilística; não é criada como o software tradicional, com regras e lógica predefinidas. Em vez disso, ela gera respostas ou toma atitudes com base em como o modelo de AI é treinado e em quais dados são extraídos. No entanto, devido à natureza probabilística da tecnologia, a AI pode alucinar. As alucinações são uma consequência direta da extração inadequada ou imprecisa. Quando a AI não tem acesso aos dados corretos, ela gera informações plausíveis, mas incorretas. Essa é uma barreira crucial para a adoção de AI, especialmente em empresas e para casos de uso fundamentais, em que não se pode abrir mão da precisão.

Isso torna essencial a recuperação dos dados mais relevantes para que os aplicativos de AI entreguem resultados de alta qualidade e precisos quanto ao contexto. Hoje, os desenvolvedores dependem de um conjunto de componentes separados para criar aplicativos com tecnologia de AI. Escolhas inferiores desses componentes, como modelos de incorporação, podem resultar em recuperação de dados de baixa relevância e resultados de baixa qualidade. Essa abordagem fragmentada é complexa, cara, ineficiente e complicada para os desenvolvedores.

Com a Voyage AI, o MongoDB resolve esse desafio ao tornar a pesquisa e recuperação com tecnologia de AI nativas do banco de dados. Em vez de implementar soluções alternativas ou gerenciar sistemas separados, os desenvolvedores podem gerar incorporações de alta qualidade a partir de dados operacionais em tempo real, armazenar vetores, realizar pesquisa semântica e refinar os resultados. Tudo dentro do MongoDB. Isso elimina a complexidade e proporciona maior precisão, menor latência e uma experiência de desenvolvedor mais simplificada.

O que o Voyage AI traz para o MongoDB

A Voyage AI montou uma equipe de pesquisa em AI de excelência com origens em Stanford, MIT, UC Berkeley e Princeton, e rapidamente se tornou líder em recuperação de AI de alta precisão. A tecnologia deles já garantiu a confiança de algumas das startups de AI mais avançadas, como Anthropic, LangChain, Harvey e Replit.

Em especial, os modelos de incorporações da Voyage AI são os modelos zero-shot com a melhor classificação na comunidade Hugging Face. Os modelos da Voyage AI são projetados para melhorar a qualidade do resultado gerado:

• Aprimorando a pesquisa vetorial por meio da criação de incorporações que captam melhor o significado em textos, imagens, PDFs e dados estruturados.

• Aprimorando a precisão da recuperação por meio de modelos avançados de reclassificação que refinam os resultados de pesquisa para aplicativos impulsionados por AI.

• Habilitando AI específica de domínio com modelos ajustados e otimizados para diferentes setores, como serviços financeiros, de saúde e jurídicos, e casos de uso como geração de código.

Ao integrar as funcionalidades de recuperação da Voyage AI ao MongoDB, estamos ajudando as organizações a criar aplicativos de AI com maior facilidade, precisão e confiabilidade, sem complexidade desnecessária.

Como a Voyage AI será integrada ao MongoDB

Estamos integrando a Voyage AI ao MongoDB em três fases. Na primeira fase, os modelos de incorporação de texto, incorporação multimodal e reclassificação da Voyage AI continuarão amplamente disponíveis através das APIs atuais da Voyage AI e dos Marketplaces da AWS e Azure, garantindo que os desenvolvedores possam continuar a utilizar suas funcionalidades de incorporação e reclassificação de ponta. Também investiremos na escalabilidade e na prontidão empresarial da plataforma para dar suporte à crescente adoção dos modelos da Voyage AI.

Em seguida, integraremos totalmente as funcionalidades da Voyage AI ao MongoDB Atlas, começando com um serviço de incorporação automática para o Vector Search, que gerenciará a geração de incorporações automaticamente. A reclassificação nativa virá em seguida, permitindo que os desenvolvedores aumentem instantaneamente a precisão da recuperação. Também planejamos expandir as funcionalidades de AI específicas de domínio para oferecer melhor suporte a diferentes setores (por exemplo, serviços financeiros, jurídicos etc.) ou casos de uso (por exemplo, geração de código).

Por fim, avançaremos na recuperação com tecnologia de AI com funcionalidades multimodais aprimoradas, permitindo a recuperação e classificação total de textos, imagens e vídeos. Também planejamos introduzir modelos ajustados por instruções, permitindo que os desenvolvedores refinem o comportamento de pesquisa usando prompts simples em vez de ajustes complexos. Isso será complementado pela incorporação do gerenciamento do ciclo de vida no MongoDB Atlas, assegurando atualizações contínuas e otimização em tempo real para aplicativos de AI.

Como isso afeta desenvolvedores e empresas

Aplicativos com tecnologia de AI precisam de mais do que um banco de dados que apenas armazene, processe e mantenha dados; eles precisam de um banco de dados que melhore ativamente a precisão da recuperação, dimensione sem interrupções e elimine o atrito operacional. Com a Voyage AI, o MongoDB redefine o que é necessário para que um banco de dados sustente aplicativos fundamentais com tecnologia de AI.

Os desenvolvedores não precisarão mais gerenciar APIs de incorporação externas, armazenamentos de vetores autônomos ou pipelines de pesquisa complexos. A recuperação de AI será criada no banco de dados, tornando a pesquisa semântica, a recuperação de vetores e a classificação tão integradas quanto as queries tradicionais.

Para as empresas, isso se traduz em um tempo menor para obter valor e maior confiança no dimensionamento de aplicativos de AI. Ao fornecer resultados de alta qualidade em escala, as empresas podem integrar perfeitamente a AI aos seus casos de uso mais críticos, garantindo confiabilidade, desempenho e impacto no mundo real.

Olhando para o futuro: o que vem a seguir

Esse é apenas o começo. Nossa meta é fazer o MongoDB se tornar o banco de dados mais potente e intuitivo para aplicativos modernos impulsionados por AI.

• Os modelos da Voyage AI estarão disponíveis em breve, de forma nativa, no MongoDB Atlas.

• Continuaremos a evoluir as funcionalidades de recuperação de AI do MongoDB, tornando-as mais inteligentes, mais adaptáveis e capazes de lidar com uma gama mais ampla de tipos de dados e casos de uso.

Logo traremos mais detalhes sobre como você pode começar a usar as funcionalidades da Voyage AI no MongoDB.