10. Google выпустила EmbeddingGemma 2: 740 млн параметров для текста, кода, аудио и видео
Модель на архитектуре Gemma 4 с лицензией Apache 2.0 объединяет текст, код, изображения, аудио и видео в единое эмбеддинг-пространство. Она модульная: 270M параметров для текста, опциональные энкодеры на 170M для зрения и 300M для аудио; с квантизацией на Pixel 11 Pro полная модель занимает ~567MB RAM. Matryoshka-усечение позволяет резать вектор с 768 до 128 измерений и экономить до 6x памяти.