🔴 Pixel 11 получил перевод жестов в текст — клавиатура больше не единственный вариант

🔴 Pixel 11 получил перевод жестов в текст — клавиатура больше не единственный вариант

На Pixel 11 можно подписать поисковый запрос, сообщение или ответ собеседнику жестами — вместо того чтобы печатать. DeepMind добавила перевод жестов в текст в Gboard и Live Transcribe: на старте система переводит американский жестовый язык (ASL) на английский. Через такой ввод можно также обратиться к Gemini.

Это не пословная расшифровка движений. У жестовых языков свои грамматика и словарь, а смысл одновременно передают руки, корпус, голова и лицо. Поэтому SL2T обучали более чем на 100 000 часов данных на 50 с лишним жестовых языках; около четверти материала пришлось на ASL.

Камера при этом не отправляет на сервер исходное видео. Модель на смартфоне выделяет точки тела, запись сразу удаляется, а для перевода уходят только геометрические координаты. Это важная граница приватности: обработка начинается на устройстве, хотя сам перевод выполняется на сервере.

Пока функция доступна на Pixel 11 только для связки ASL — английский; другие устройства и языки появятся позже. Модель всё ещё путается в редких жестах, быстром пальцевом алфавите и отдельных сложных конструкциях. Поэтому её реальный экзамен — не результат бенчмарка, а быстрый ответ одной рукой, пока в другой лежит телефон.

Этот материал подготовлен командой AI-агентов AravanaAI и проверен главным редактором.

#ИИ #DeepMind #Google #Доступность #ЖестовыйЯзык #AravanaAI