[SPH] Описание изображений без Интернета! Скачивайте приложение под Android.
Здравствуйте все!!!
Описание изображений на естественном языке давно стало привычным.
Но для этого всегда было нужно подключение к Интернет, которое есть не
всегда и не везде.
Предлагаю приложение под названием "Я посмотрю", которое делает
описания изображений без подключения к Интернет.
Нейросетевая модель будет работать прямо на вашем Android-смартфоне.
Как пользоваться.
1. Запустите приложение.
2. Направьте камеру на то, что хотите сфотографировать.
3. Нажмите кнопку "Сделать фото".
4. Найдите кнопку "Задать вопрос", коснитесь её быстро дважды и после
второго касания удерживайте палец на экране.
5. Когда прозвучит короткий звуковой сигнал, задайте вопрос по поводу
изображения и отпустите кнопку.
6. Через несколько секунд прозвучит описание изображения и ответ на
ваш вопрос.
Так же, можно получить описания изображений из других приложений,
таких как Галерея, мессенджеры и так далее.
Для этого.
1. Откройте изображение в стороннем приложении.
ы2. Найдите кнопку или пункт в меню под названием "Поделиться".
3. В открывшемся списке приложений выберите приложение "Я посмотрю".
4. Откроется приложение "Я посмотрю".
6. Задайте вопрос по поводу изображения с помощью кнопки "Задать
вопрос".
В приложении можно выбрать, каким синтезатором речи оно будет
говорить.
Для этого нажмите кнопку "Настроить голос". На появившемся экране вы сможете выбрать любой синтезатор речи, установленный на
вашем смартфоне, настроить скорость речи, высоту тона голоса и
прослушать пример того, как это будет звучать.
После завершения настройки просто вернитесь назад на основной экран
приложения.
Как установить приложение "Я посмотрю".
1. Скачайте установочный APK файл приложения с Яндекс-Диска по ссылке:
https://disk.yandex.ru/d/EXwbhYKs9n8rrA
2. Скачайте ZIP архив с файлом нейросетевой модели с Яндекс-диска по ссылке:
https://disk.yandex.ru/d/cbLck-ZGhNEFXw
Размер архива 2,05 ГБ.
3. Распакуйте архив. Внутри архива будет папка "YaPosmotryu" с файлом
нейросетевой модели внутри.
4. Скопируйте папку "YaPosmotryu" с файлом модели в память вашего
устройства, в корневой каталог.
(Не переименовывайте папку и файл и не прячте их внутрь других папок).
5. Скопируйте установочный APK файл в любую папку на вашем устройстве.
6. Откройте APK файл с помощью любого файлового менеджера на вашем
устройстве и установите приложение.
7. Запустите установленное приложение и дайте ему необходимые
разрешения, которые оно попросит при первом запуске.
Ответы на заданные и возможные вопросы.
1. На основе какой модели работает приложение?
Ответ: Это модель Gemma4 от Google на два миллиарда параметров.
Она мультимодальная, на вход принимает текст, изображения и
речь, на выходе генерирует текст.
2. Можно ли включать или выключать вспышку камеры?
Ответ: Управление вспышкой происходит автоматически. Если света мало, при
фотографировании сработает вспышка. Если освещение хорошее, вспышка
срабатывать не будет.
3. Как держать смартфон при фотографировании, вертикально или
горизонтально?
Ответ: Приложение определяет положение смартфона и, можно
фотографировать при любом из четырёх возможных положений смартфона, даже держа смартфон "вниз головой". Модель всё-равно
получит правильно сориентированное изображение.
4. Приложение не редко говорит, что предмет плохо различим, делает
несколько предположений о том, что это за предмет, читает не весь
текст, говоря, что его трудно разобрать и, иногда, странно строит фразы.
Ответ: Изначально, модели Gemma от Google были большими моделями
Gemini. Модели Gemma прошли, так называемую дистилляцию, количество
параметров, весов модели было очень сильно уменьшено, благодаря чему
их можно запускать на бытовых компьютерах, смартфонах и самодельных
устройствах.
Но, такая оптимизация ухудшила качество генерации текста и работы с
изображениями.
Поэтому, качество описаний изображений и ответов будет конечно хуже,
чем у больших языковых моделей, но для тех случаев, когда нет
Интернета, это всё-равно не плохой вариант.
5. В некоторых ответах очень часто звучит слово "звёздочка".
Ответ: Да, модель любит вставлять в свои ответы символ "*"
(звёздочка), а все синтезаторы речи, как выяснилось, любят его
произносить. (улыбка) Исправлю в следующей версии. Перед отправкой на
синтез речи звёздочки либо будут удаляться из текста, либо заменяться
пробелами.
6. Какие разрешения запрашивает приложение и для чего?
Ответ:
Камера- чтобы фотографировать.
Микрофон- чтобы слышать вопросы.
Доступ ко всем файлам- чтобы иметь доступ к файлу модели
/storage/emulated/0/YaPosmotryu/model.litertlm
Телефон- чтобы прервать речь, если вы ответите на входящий звонок.
Разрешение на телефон можно не давать, но тогда приложение не будет
знать о телефонном звонке и продолжит говорить на фоне
разговора, если вы ответите на входящий звонок в момент прослушивания
ответа приложения.
Исходный код приложения можно скачать по ссылке:
https://disk.yandex.ru/d/1cc0PD3SqeALvw
Надеюсь. приложение будет полезным!
Желаю всем приятного использования.
С уважением, Алексей!!!
Криптовалюты и их доступность для незрячих пользователей.
Аудиокурс для начинающих.
Скачивайте с RuTracker по ссылке:
https://rutracker.org/forum/viewtopic.php?t=6574634
Или с Яндекс-диска по ссылке:
https://disk.yandex.ru/d/b3l-4ebfYhLZ3g
Или в библиотеке av3715 по ссылке:
https://av3715.ru/library/book.php?id=238396
Всем привет.
Давайте поговорим немного о слуховых аппаратах о их достоинствах и
недостатках.
Ясен-перец, что хороший специалист подберет и все такое, но хотелось бы
немного разбираться в вопросе. Как говориться, сам о себе не
побеспокоишься, никто о тебе не побеспокоится.
Исходим из того, что рекомендация, аудиограмма и позиция в ИПРА есть.
Кстати, незрячие с начальными стадиями, скажем, тугоухости имеют такую
возможность, т.е. внести слуховой аппарат в ИПРА.
Итак, есть слуховые аппараты
Внутриканальные
Внутриушные и
Заушные.
Поскольку мне в бумагах прописали заушные средней мощности, то хотелось
бы поговорить об аппаратах этого типа.
Вообще почему я вдруг озадачился этим вопросом. Да просто нам регионалы
однократно выделяют компенсацию сто тысяч на каждый аппарат, и не
хотелось бы бездарно слить эту возможность.
Первое погружение в тему говорит, что на рынке популярны нeсколько фирм
датские Widex.
ReSound и швейцарская Phonac.
Во всяком случае, на сайтах во Владивостоке они имеются. Есть, конечно,
и Исток аудио и прочие. В связи с чем хотелось бы узнать ваше мнение что
проще в обращении, Надежнее, у кого лучше после продажное обслуживание и
поддержка.
На чтонадо обращать внимание, за чем гнаться, а чего избегать.
Здесь увидел следующие характеристики:
Тип корпуса
Степень потери слуха
Сигнал
Цифровой программируемый
Влагозащита,
подавление обратной связи,
регулировка громкости,
совместимость со смартфоном,
шумоподавление
Кол-во каналов
Мощность
вынесенный ресивер,
телефонная катушка,
Что из этих характеристиксвойственно для всех аппаратов? Возможно
чего-то среди этих характеристик нет, а на это обязательно нужно
обращать внимание.
Ну и, естественно,технический прогресс не стоит на месте, вдруг уже
появились какие-то новшества на которые стоило бы особо обратить
внимание. Коллеги, если есть что рассказать, расскажите. Надо
представить глубину вопроса.
.Еще раз повторюсь, что тезис охорошем специалисте, который все
подберет, я не отвергаю и буду ему следовать, но хотелось бы и с
сознанием дела проконтролировать этот вопрос.
А то у нас в трех конторах везде разный Ассортимент.
Буду весьма признателен за ваши отклики.
Всем всего предобрейшего.