Embora quase 80% dos dados do mundo estejam no formato de vídeo, permitir a busca e a compreensão de dados de vídeo tem sido, historicamente, uma tarefa desafiadora, manual e demorada. A equipe da Twelve Labs decidiu mudar isso desenvolvendo modelos fundacionais multimodais focados em vídeo — e construindo uma plataforma poderosa em torno desses modelos avançados para permitir que as empresas extraiam valor de seus vastos arquivos de conteúdo de vídeo. Durante esse processo, a equipe da Twelve Labs fez uma parceria com a MosaicML e a Databricks para criar seus modelos líderes do setor e adicionar inteligência de vídeo à Plataforma de Inteligência de Dados da Databricks.
Hoje, temos o prazer de anunciar que a Databricks Ventures investiu na Twelve Labs. Esse investimento aprofunda nossa parceria de longa data com a Twelve Labs e abre as portas para pontos de integração adicionais entre a Databricks e a Twelve Labs para ajudar a revelar o contexto contido nos dados de vídeo para um conjunto mais amplo de clientes.
A Twelve Labs está na vanguarda da resolução de um dos desafios mais complexos da AI atualmente: o raciocínio de vídeo. Combinando pesquisa profunda com o feedback dos clientes no mundo real, a Twelve Labs desenvolveu uma suíte de modelos proprietários que geram embeddings de vídeo poderosos que capturam as relações complexas entre expressões visuais, linguagem corporal, palavras faladas e o contexto geral nos vídeos. Com a Twelve Labs, as empresas agora podem pesquisar e monetizar facilmente extensas bibliotecas de vídeos, extrair insights e reaproveitar conteúdo em escala.
A abordagem exclusiva da Twelve Labs, focada em vídeo e orientada por pesquisa, permitiu que a empresa conquistasse uma gama impressionante de clientes corporativos em diversos setores com uso intensivo de vídeo, incluindo esportes, mídia e entretenimento, publicidade e muito mais. Nossos clientes nesses setores têm solicitado cada vez mais à Databricks que estenda os recursos analíticos da Plataforma de Inteligência de Dados da Databricks para dados de vídeo, de modo que encontrar maneiras de trabalhar mais de perto com a Twelve Labs, líder em compreensão de vídeo, foi um passo natural.
Recentemente, anunciamos uma integração entre a Twelve Labs e a Databricks que reduz o tempo de desenvolvimento e a necessidade de recursos para aplicações avançadas de vídeo. Ao aproveitar embeddings multimodais e recursos eficientes de AI Search fornecidos pelo Databricks AI Search, nossa integração permite que os desenvolvedores criem sistemas sofisticados de busca, recomendação e análise de vídeo.
No futuro, prevemos trabalhar com a Twelve Labs para aprofundar nossas integrações tecnológicas, como permitir o acesso aos modelos de vídeo da Twelve Labs nativamente na solução Databricks Model Serving. Isso permitiria que nossos clientes em comum impulsionassem de forma muito mais integrada casos de uso avançados de compreensão de vídeo — desde a busca em grandes volumes de conteúdo de vídeo usando linguagem natural até a indexação e análise de clipes e cenas de vídeo com base em texto ou imagens —, facilitando a incorporação da compreensão de vídeo nos pipelines de dados e fluxos de trabalho de machine learning existentes da Databricks. À medida que o conteúdo de vídeo continua a se proliferar em todos os setores, de mídia e entretenimento a e-commerce e segurança, a capacidade de analisar e extrair valor de dados de vídeo de maneira eficiente se tornará cada vez mais crucial.
Estamos entusiasmados em trabalhar ainda mais de perto com a equipe da Twelve Labs. Fique atento às novidades sobre colaborações futuras.
(Esta publicação no blog foi traduzida utilizando ferramentas baseadas em inteligência artificial) Publicação original
Assine nosso blog e receba os posts mais recentes diretamente na sua caixa de entrada.