Здравствуйте все!!!
Хотите, чтобы ваш привычный Гугл ассистент стал не просто ботом, а
действительно умненьким, да ещё и описания изображений делать
научился?
Это можно сделать, установив приложение-клиент для языковой модели
Google Gemini и дополнительно интегрировать Gemini в Google assistant.
Активируйте Google Assistant, фотографируйте, задавайте вопросы по
поводу снимка и получайте ответы.
А если вы поделитесь изображением с приложением Gemini, языковая
модель тоже сделает его описание. При отправке изображения можно сразу написать
конкретный вопрос, чтобы получить ответ, а не описание всего
изображения в целом.
Описания очень подробные, по-моему, даже гораздо более подробные, чем
у Be my AI.
Если вы не в России, скорее всего, для вас всё просто, установите из
Google Play приложение Gemini и пользуйтесь.
А вот в России Gemini не работает, так и пишет, "Пока не
поддерживается в вашей стране, мы сообщим, когда это изменится".
Такое сообщение появляется и в приложении, и на сайте Gemini:
https://gemini.google.com
Просто слово из трёх букв не помогло, появляется всё то же сообщение.
Помогает слово из трёх букв плюс Tor.
Но в чём же дело?
Откуда Gemini получает информацию о реальной географической привязке?
Оказалось, это DNS-сервер.
Публичные DNS сервера типа 8.8.8.8 или 1.1.1.1 ситуацию не меняют.
Поэтому, будем использовать DNS, который нас не сдаст.
Это потенциально не безопасно, недобросовестные администраторы DNS
серверов могут перенаправлять вас на фейковые сайты и соединять с
фейковыми сервисами, даже если введён правильный адрес.
Не используйте предлагаемый ниже метод на устройствах, с которых вы
заходите на платёжные сервисы и выполняете другие ответственные
действия.
Учитывайте риски.
Если риски для вас неприемлемые, можно не продолжать читать.
Если у вас есть устройство, на котором риски не критичны, тогда
продолжаем.
Первым делом, открываем настройки, в них раздел "Подключения", далее
"Дополнительные настройки", а затем "Персональный DNS сервер".
Названия пунктов могут отличаться на разных моделях, на смартфонах
Samsung Galaxy путь именно такой.
Открываем "Персональный DNS сервер" и выбираем вариант "Имя хоста
провайдера персонального DNS сервера".
После этого в редакторе ниже вводим:
comss.dns.controld.com
Я не знаю, почему этот сервер бесплатный, кто его предоставляет и на
сколько это добросовестный поставщик DNS.
После того, как ввели адрес сервера нажимаем кнопку "Сохранить" и
выходим из настроек.
Выберите Google в качестве цифрового помощника по умолчанию,
это обязательно.
Далее ставим приложение Gemini из Google Play по ссылке:
https://play.google.com/store/apps/details?id=com.google.android.apps.bard
С Российского аккаунта приложение может быть недоступным, поэтому,
смените регион в аккаунте Google Play. Это в любом случае давно пора
сделать, а Госуслуги и другие Российские приложения вы всегда сможете
установить из RuStore.
Я поменял регион на Турцию, всё отлично, всё доступно, всё
обновляется.
О том, как поменять регион в Google Play можно прочитать по ссылке:
https://trashbox.ru/link/how-to-pay-for-apps
После установки включаем слово из трёх букв.
Если у вас настроено раздельное туннелирование, добавьте в туннель
приложение Google. Подчёркиваю, не Gemini, а именно Google.
После этого запускаем Gemini, проходим первый запуск и Gemini готова к
общению и распознаванию изображений.
Теперь настроим интеграцию Gemini с Google Assistant.
В приложении Gemini нажимаем кнопку нашего профиля с именем нашей
учётной записи Google, она находится в правом верхнем углу.
В открывшемся меню ищем пункт "Настройки", а в настройках открываем
пункт "Функции Google-ассистента в Gemini", и в ней включаем
переключатель "Функции Google-ассистент в Gemini".
На этом всё готово, пользуйтесь!
Немного о том, как это всё работает.
Активируйте Google-ассистента и произнесите запрос. Если это не
просьба позвонить или написать сообщение и ваш запрос не активировал
ни один сценарий ассистента, текст запроса будет перекинут нейронке
Gemini и она сгенерирует ответ, который будет озвучен синтезатором
речи.
Увы, к сожалению Google пока не доверили нейронке выполнение
действий на устройстве, хотя, по ощущениям, она могла бы. (улыбка).
Рядом с редактором и кнопкой микрофона есть кнопка "Выбор
изображения". При нажатии этой кнопки откроется интерфейс для
фотографирования, с помощью которого можно сделать снимок, в этом
интерфейсе есть кнопка, позволяющая открыть Галерею на устройстве и
выбрать сохранённую картинку.
Картинка прикрепляется к сообщению, перед отправкой нужно голосом или
клавиатурой ввести какое-нибудь сообщение, только тогда кнопка
"Отправить" станет активной.
Так же, Google-ассистент с Gemini не выполняют поиск в интернете,
языковая модель отвечает на вопросы, используя свои знания о мире.
Ответить, до какой даты она знает о мире Gemini мне отказалась, но,
после нескольких тестов выяснил, что на текущий момент она
знает о событиях, произошедших до декабря 2024 года.
У Gemini не плохой размер контекста, я долго мучил её фотографиями
упаковки чая и разговорами об этом чае, добавляя в процессе ещё
фотографии к сообщениям, но, контекст не закончился, Google Assistant
с Gemini по-прежнему помнили, с чего началась беседа и даже цитировали
моё первое сообщение.
Кстати, при фотографировании текстов Gemini не отказывается цитировать
тексты на изображениях. Оказывается, запреты нейронкам цитировать
связаны с Европейским законодательством, а в США таких запретов нет и
цитирование информации нейронками допустимо.
При чтении текстов на изображениях Gemini подробно поясняет их смысл.
(улыбка). То ли температуру ей выкрутили на максимум, то ли модель
такая.
Системный промт недоступен для пользователя и что там написано
неизвестно.
Gemini не может фотографировать по просьбе пользователя,
соответствующие кнопки надо нажимать самому.
можно делиться с Gemini изображениями из других приложений и получать
их описания. Единственное, после того, как поделились и открылась
Gemini, надо ещё ввести какой-нибудь запрос по поводу изображения и
нажать кнопку "Отправить".
Фотография попадает в чат с Gemini.
И, как я понял, всё это работает и будет работать бесплатно.
Совет. На телефонах Samsung часто встречается проблема с
громкостью Google-ассистента, он говорит на много тише, чем программа
экранного доступа.
А всё дело в том, что Google изобрёл для него ещё один аудиоканал.
Нет, это не мультимедиа, не рингтон или специальные возможности, а ещё
один отдельный регулятор звука специально для Google-ассистента,
который, как и специальные возможности, не отображается в настройках.
Чтобы прибавить громкость ассистента.
1. Заставьте Google-ассистент что-то говорить, желательно долго и
много.
2. Отключите программу экранного доступа.
3. Кнопками громкости настройте нужную громкость ассистента.
4. Включите программу экранного доступа.
Регулировать громкость ассистента при включённой программе экранного
доступа не получится. В этом случае будет регулироваться либо
громкость специальных возможностей, либо громкость мультимедиа, но не
ассистента.
И ещё совет. Не включайте активацию ассистента командой "OK Google".
На русском языке это сейчас работает плохо, образец голоса не
используется, ассистент активируется любым голосом. Сказанное кем-то
"OK Google" активирует ассистентов на всех смартфонах вокруг.
Помните, сейчас цифровой помощник активируется не удержанием кнопки
домой, а проведением из левого или правого нижнего угла к центру
экрана.
Без программы экранного доступа нужно проводить одним пальцем, при
включенной программе экранного доступа двумя пальцами.
На этом прощаюсь и желаю всем интересного и полезного использования
Gemini!
