Google AI Edge Gallery

AI Edge Gallery — это ведущая платформа для запуска самых мощных в мире моделей обработки больших языков (LLM) с открытым исходным кодом на вашем мобильном устройстве. Оцените высокопроизводительный генеративный ИИ прямо на вашем оборудовании — полностью в автономном режиме, конфиденциально и молниеносно.

Теперь с поддержкой EmbeddingGemma 2

Это обновление добавляет официальную поддержку недавно выпущенной модели EmbeddingGemma 2. В этом релизе мы предлагаем передовой многомодальный семантический поиск, работающий на 100% на вашем устройстве. Оцените новые возможности в наших новых функциях: мгновенный поиск медиафайлов и поиск моментов видео.

Основные функции

- Навыки агента: Превратите вашу модель обработки больших языков из разговорного помощника в проактивного ассистента. Используйте плитку «Навыки агента», чтобы расширить возможности модели с помощью таких инструментов, как Википедия для подтверждения фактов, интерактивные карты и подробные визуальные карточки-резюме. Вы даже можете загружать модульные навыки по URL-адресу или просматривать вклад сообщества в обсуждениях GitHub.

- Чат с ИИ и режимом мышления: Участвуйте в динамичных многоходовых диалогах и включайте новый режим мышления, чтобы заглянуть «под капот». Эта функция позволяет увидеть пошаговый процесс рассуждений модели, что идеально подходит для понимания решения сложных задач. Примечание: В настоящее время режим мышления работает с поддерживаемыми моделями, начиная с семейства Gemma 4.

- Мгновенный поиск медиафайлов: Изучайте свою фотобиблиотеку (или встроенные образцы медиафайлов) с помощью быстрых запросов на естественном языке по мере ввода и сопоставления изображений по сходству — без обращения к облачным сервисам.

- Поиск моментов в видео: Точно определяйте моменты в видео с помощью описаний на естественном языке. Переходите сразу к выделенным временным меткам на интерактивной временной шкале, обрезайте клипы и сохраняйте или экспортируйте ваши любимые моменты.

- Запрос изображения: Используйте возможности мультимодального анализа для идентификации объектов, решения визуальных головоломок или получения подробных описаний с помощью камеры или фотогалереи вашего устройства.

- Аудиоскрейпер: Расшифровка и перевод голосовых записей в текст в реальном времени с использованием высокоэффективных языковых моделей, встроенных в устройство.

- Лаборатория подсказок: Специальное рабочее пространство для тестирования различных подсказок и сценариев использования в один ход с детальным контролем параметров модели, таких как температура и top-k.

- Мобильные действия: Разблокируйте офлайн-управление устройством и автоматизированные задачи, полностью основанные на тонкой настройке FunctionGemma 270M.

- Мини-сад: Веселая экспериментальная мини-игра, использующая естественный язык для посадки и сбора урожая в виртуальном саду с помощью тонкой настройки FunctionGemma 270m.

- Управление моделями и бенчмаркинг: Галерея — это гибкая песочница для широкого спектра моделей с открытым исходным кодом. Легко загружайте модели из списка или загружайте свои собственные пользовательские модели. Легко управляйте своей библиотекой моделей и запускайте тесты производительности, чтобы точно понять, как каждая модель работает на вашем конкретном оборудовании.

- 100% конфиденциальность на устройстве: Все выводы модели происходят непосредственно на вашем устройстве. Для работы приложения не требуется подключение к интернету, что обеспечивает полную конфиденциальность ваших запросов, изображений и конфиденциальных данных.

Создано для сообщества

AI Edge Gallery — это проект с открытым исходным кодом, разработанный для сообщества разработчиков и энтузиастов ИИ. Изучите наши примеры функций, внесите свой вклад и помогите сформировать будущее экосистемы агентов на устройствах.

Исходный код доступен на GitHub:
https://github.com/google-ai-edge/gallery

Примечание: Приложение находится в активной разработке. Производительность зависит от аппаратного обеспечения вашего устройства (процессор/графический процессор). Для получения поддержки или обратной связи свяжитесь с нами по адресу google-ai-edge-gallery-android-feedback@google.com