50 скрытых фишек на Android, о которых не многие знают: Часть 2

Goole AI опубликовали подход для распознавания жестов в реальном времени с камеры телефона. Модель реализована в MediaPipe , открытом фреймворке для обработки видео- и аудиоданных. Текущие state-of-the-art решения нуждаются в вычислительной мощности ПК, а подход от Google выдает результаты в реальном времени на телефоне и масштабируется на несколько рук. 

Для чего нужны кнопки навигации на телефоне?

Это полезные, обеспечивающие удобство. Работать с ними нужно следующим образом:

  • Одно нажатие – назад;
  • Задержка пальца и отпускание – переход на экран;
  • Удержание и проведение – осуществление обзора;
  • Стандартное перетаскивание – перемещение объектов.

Если нет навигации, опция предусмотрена на телефоне. Активировать ее можно через настройки. Необходимо перейти туда. Найти и выбрать вкладку Система. На странице пользователь должен найти навигацию и включить ее. деактивировать объект требуется по аналогичной схеме.

Пайплайн для распознавания рук и жестов

Пайплайн состоит из нескольких моделей, которые работают совместно:

  • Модель для распознавания ладони (BlazePalm), которая принимает на вход изображение и выдает границы ладони;
  • Модель для разметки ладони, которая принимает на вход обрезанное по границам изображение ладони и выдает 3D точки ладони;
  • Детектор жестов, который классифицирует полученную на прошлом этапе последовательность точек ладони по заранее размеченным классам

Исследователи замечают, что правильно обрезанная фотография ладони позволяет значительно сократить необходимость в увеличении размерности данных. Так сеть фокусируется на предсказании координатов точек ладони.

Визуализация составных частей пайплайна

BlazePalm

Чтобы распознать изначальное положение руки на изображении применяется модель BlazePalm. Сначала обучается детектор ладони. Затем используется кодировщик-декодировщик, чтобы учитывать контекст изображения. Focal функция потерь минимизируется во время обучения.

Использование таких техник позволяет достичь точности в 95.7% в предсказании границ ладони.

Распознавание точек ладони

После детектора границ ладони оригинальное изображение обрезается. Детектор точек ладони работает с обрезанным изображением. Модель распознает положение 21 точки ладони и выдает их координаты на выходе. Сеть устойчива к частично видимым рукам и скрещиваниям рук.

Распознавание жестов

Поверх распознанному скелету ладони применяется модель для классификации жестов. Изначально в классы были записаны такие жесты, как палец вверх, кулак, “OK”, “Rock” и “Spiderman”.

Как настроить Миракаст на Андроид: выводы

Итак, инструкция как настроить Миракаст на Андроид очень проста. Нужно включить его на ТВ, на смартфоне и выбрать телевизор из списка. Технология работает отлично, а неполадки решаются также легко. Если ТВ не поддерживает функцию, достаточно установить внешний адаптер. Если сигнал подтормаживает, можно приблизить устройства друг к другу. Иногда для подключения или ускорения нужно перезагрузить телефон и телевизор и соединить их после этого.

Читайте также:  Samsung Galaxy S5 – неоднозначный флагман

Я очень доволен технологией и рекомендую её всем знакомым. Miracast превращает Android-смартфон в настоящий медиа-центр. Для этого нужно разобраться с подключением один раз, после чего его можно применять повсеместно.

Общие принципы работы программ управления жестами

Общий принцип работы программ заключается в привязке определённого движения, рисуемого пользователем на экране аппарата, к конкретному действию системы или указанного пользователем приложения (переход на основной экран, управление мультимедийными возможностями, включение быстрого поиска, вывод списка последних использованных приложений и т. д.). Рисование происходит в областях экрана, строго определённых пользователем в соответствующем приложении, что значительно снижает риск восприятия случайных касаний экрана в качестве управляющих жестов Android.

Кстати, нелишним будет обратить ваше внимание на то, что полноценное использование всех функций приложений по обработке жестов управления на Android возможно только в случае наличия root-прав доступа на вашем планшете. Однако, обладателям не-root-ванных устройств не следует огорчаться — для получения доступа к большинству функций приложений достаточно просто добавить приложение в перечень администраторов, находящийся в меню настроек вашего устройства (Безопасность — Администрирование).

В данной статье мы не стали уделять большое внимание вопросу выбора соответствующего приложения для поддержки управления жестами — мы только привели в конце статьи небольшой список наиболее популярных программ по теме. А пока что давайте изучим основные типы жестов, что позволяют без проблем и усилий управлять вашим смартфоном даже одним, мы не преувеличиваем, пальцем левой руки.

Список необходимых переходников

Чаще всего при соединении переходники не нужны. Однако есть нестандартные случаи, к которым нужно быть готовыми заранее. 

В таблице собран список всех возможных переходников при подключении смартфона к проектору.

Переходник Когда может пригодиться
USB-C–HDMI Если телефон не работает с MHL и у него нет mini-HDMI
MHL–HDMI Если гаджет работает с MHL
HDMI-VGA Если экран работает только с VGA
Lightning — USB, Lightning — HDMI Для владельцев iOS-техники (iPhone, iPad) 

  Для трансляции материалов со смартфона на проектор нужно соблюдать требования к синхронизации. Поэтому стоит внимательно изучить возможности гаджетов и решить, какой способ подойдет в конкретном случае.

Как использовать жесты TalkBack

С помощью жестов TalkBack вы можете легко управлять устройством Android.

Они делятся на три типа: основные, жесты перехода и угловые. Их необходимо выполнять одним движением, с постоянной скоростью, равномерно надавливая на экран.

Основные жесты

ДействиеЖест
Перейти к следующему объекту на экране Вправо
Перейти к предыдущему объекту на экране Влево
Переключение настроек навигации Вверх или вниз
Выбрать элемент Двойное нажатие

Жесты перехода

ДействиеПровести по экрану
Перейти к первому объекту на экране Вверх, затем вниз
Перейти к последнему объекту на экране Вниз, затем вверх
Прокрутить вперед(если страница длиннее одного экрана) Вправо, затем влево
Прокрутить назад(если страница длиннее одного экрана) Влево, затем вправо
Переместить ползунок вверх(например, громкости) Вправо, затем влево
Переместить ползунок вниз(например, громкости) Влево, затем вправо
Читайте также:  Sharp KP85PH – новая Hi-Fi-аудиосистема c поддержкой Bluetooth

Угловые жесты

Эти жесты состоят из двух линий, формирующих прямой угол. Например, чтобы перейти на главный экран, нужно сначала провести вверх, потом резко влево под углом 90 градусов (этот жест установлен по умолчанию).

ДействиеПровести по экрану
Перейти на главный экран Вверх, затем влево
Нажать кнопку «Назад» Вниз, затем влево
Нажать кнопку «Обзор» Влево, затем вверх
Открыть панель уведомлений Вправо, затем вниз(см. примечание ниже)
Открыть локальное контекстное меню Вверх, затем вправо
Открыть общее контекстное меню Вниз, затем вправо

Примечание. Жест, открывающий панель уведомлений (вправо, затем вниз), поддерживается не во всех версиях TalkBack. Если он не сработал на вашем устройстве, проведите двумя пальцами от верхнего края экрана вниз.

Жесты двумя пальцами

Все жесты TalkBack выполняются одним пальцем. Пока вы касаетесь экрана одним пальцем, ваши жесты отправляются только в TalkBack.

Однако при использовании двух или более пальцев ваше прикосновение или жест распознается непосредственно приложением, а не TalkBack. Например, вы можете прокручивать страницы двумя пальцами.

Некоторые приложения позволяют увеличивать и уменьшать изображение, поместив два пальца на экран и сдвигая или раздвигая их. TalkBack не препятствует распознаванию этих жестов.

Настройка жестов TalkBack

Все вышеперечисленные жесты установлены по умолчанию. При желании вы можете изменить их назначение.

Вот как это сделать:

  1. Откройте приложение «Настройки» .
  2. Выберите Спец. возможности > TalkBack.
  3. Нажмите Настройки, затем Жесты.
  4. Выберите жест.
    • Примечание. Если на вашем устройстве Android есть сканер отпечатков пальцев, вы сможете использовать жесты для отпечатков пальцев.
  5. Определите новое действие. Вы можете использовать действия, перечисленные в таблицах выше, или назначить следующие:
    • Открыть быстрые настройки
    • Озвучить с начала
    • Озвучить со следующего объекта
    • Показать список действий
    • Редактирование
    • Язык
    • Нажатие на объект 

Пульты с голосовым управлением – первый шаг к голосовому контролю техникой:

Пульт с голосовым управлением – это устройство со встроенным микрофоном, которое способно различать команды и управлять телевизором. Для работы такого пульта необходимо настроить его и TV, произвести сопряжение двух гаджетов, а затем нажать кнопку с изображением микрофона. После произнести команду и нажать «ОК».

Многие пульты дистанционного управления с поддержкой голосовых команд оборудованы также возможностью управления жестами и тачпадом.

Пульт для голосового управления телевизором Samsung Smart TV

Пульт для голосового управления на телевизорах марки Samsung Smart TV входит в комплектацию и имеет два варианта внешнего вида и внутреннего устройства. Есть вариант с сенсорным тачпадом и возможностью различения жестов, а есть оп виду обычный пульт с кнопкой включения голосового управления. При первом включении устройства необходимо:

  • Зайти в меню телевизора;
  • Найти раздел «Система»;
  • Открыть подраздел «Настройка голосового управления»;
  • Выбрать нужный язык, чтобы устройство понимало команды;
  • Выбрать способ работы голосового управления (интерактивное – в режиме диалога, повелительное – четкое выполнение команд);
  • Нажать на пульте кнопку «Голос»/«Запись»/«Voice»;
  • Дождаться появления изображения на экране телевизора;
  • Произнести команду.
Читайте также:  Samsung Galaxy M21 и Galaxy Note 20 Ultra – сравнение параметров

Пульт для телевизора LG с голосовым управлением

Пульт дистанционного управления с возможностью распознавания голоса для телевизоров LG имеет название LG ДУ Magic. Он также имеет два варианта внешнего вида. Первый с сенсорным управлением. Второй – с кнопочным. Однако оба варианта имеют возможность голосового управления телевизором. Чтобы с его помощью запустить поиск нужной программы на устройстве, необходимо:

  • Нажать кнопку записи (значок микрофона) ;
  • Дождаться появления поисковой строки на экране телевизора;
  • Произнести команду;
  • В открывшемся списке найти необходимую программу или выполнить поиск еще раз для более точного результата.

Пульт с голосовым управлением Sony

Для телевизоров марки Sony пульты также различаются. Устройства с ОС Android до 2016 года имеют пульт с тачпадом и голосовым управлением. Для телевизоров, работающих на ОС Android версии после 2016 года, пульт имеет вид, обычный для среднестатического пользователя, с кнопками, но без сенсорного управления. На обоих вариантах пультов также наличествует кнопка голосового управления. Для корректной работы устройства необходимо говорить четко прямо в микрофон, расположенный на пульте ДУ или повысить голос, не теряя четкости произношения. Чтобы включить функцию голосового управления на таких устройствах, необходимо:

  • Открыть главное меню, нажав на пульте кнопку «Home»;
  • Выбрать и открыть «Настройки»;
  • Открыть раздел «Сеть и принадлежности»;
  • Найти подраздел «Голосовой пульт дистанционного управления»;
  • Включить возможность голосового управления, нажав «Активировать кнопку микрофона».

Остальные инструкции по правильному включению возможности голосового управления появятся на экране телевизора.

Как настроить голосовой поиск на телевизоре Kivi?

Пульты ДУ с голосовым управлением на телевизорах марки Kivi не всегда идут в комплекте, иногда их нужно покупать отдельно. Сопряжение этих двух устройств происходит с помощью Bluetooth. Если на пульте присутствует кнопка с изображением микрофона, то для голосового поиска нужно нажать ее и произнести необходимую фразу. Чтобы настроить пульт, нужно в настройках телевизора найти пункт «Пульты и другие устройства» и подключить нужный. После этого можно начинать пользоваться голосовым управлением TV.

ФИШКА №Экранная лупа

Экранная лупа отлично подойдет тем, у кого имеются какие-либо проблемы со зрением, а очков или линз под рукой нет. Нужно будет просто зайти в раздел «Спец. возможности» и найти в списке нужный пункт. У меня он называется иначе – «Масштабирование экрана».

Передвигаю окошко двумя пальцами и при надобности увеличиваю текст

Еще можно воспользоваться специальным жестом: тройное касание по экрану с удерживанием пальца. При его передвижении увеличительное окно так же будет перемещаться следом.