d-tags
Ładowanie...Co to jest MUVERA?
Google Research zaprezentowało nowe rozwiązanie o nazwie MUVERA (Multi‑Vector Retrieval via Fixed Dimensional Encodings), które sprawia, że wyszukiwanie przy użyciu wielu wektorów (czyli tzw. multi-vector retrieval) jest prawie tak szybkie, jak tradycyjne wyszukiwanie z jednym wektorem. To duży krok naprzód dla technologii takich jak wyszukiwarki, systemy rekomendacji czy chatboty.
Nowoczesne modele AI, np. ColBERT, używają wielu wektorów do opisania dokumentu czy pytania, co zwiększa trafność wyników, ale niestety wymaga dużo więcej mocy obliczeniowej. MUVERA rozwiązuje ten problem dzięki specjalnej technice, która zamienia wiele wektorów w jeden – tzw. Fixed Dimensional Encoding (FDE). Dzięki temu system może korzystać z szybszych metod wyszukiwania, bez dużej utraty jakości wyników.
Jak działa MUVERA?
W uproszczeniu MUVERA działa w trzech krokach:
- Kompresuje dane do jednego wektora,
- Szybko przeszukuje dane za pomocą tej uproszczonej formy,
- Dopiero na końcu dokładniej sprawdza najlepsze wyniki.
Rezultat? System działa nawet 90% szybciej niż poprzednie metody i zużywa mniej zasobów, a trafność wyników pozostaje na wysokim poziomie. Co więcej, MUVERA jest dostępna jako projekt open source, więc każdy może ją przetestować i rozwijać.
To rozwiązanie może znacząco przyspieszyć pracę nowoczesnych systemów AI, które przetwarzają duże ilości danych.
Na temat MUVERA już pod koniec maja można było posłuchać w Weaviate Podcast z Rajesh Jayaram z Google Research.
Podsumowanie
MUVERA to dowód na to, że nie trzeba już wybierać między trafnością a szybkością w systemach wyszukiwania. Dzięki sprytnemu podejściu do kompresji danych, Google po raz kolejny przesuwa granice tego, co możliwe w dziedzinie sztucznej inteligencji. Jeśli interesujesz się nowoczesnym wyszukiwaniem, NLP lub budujesz systemy oparte na wektorach – warto śledzić ten projekt z bliska.
Źródło: Google Research
