Этот робот научился синхронизировать губы как люди, просматривая YouTube.

Инженеры из Колумбийского университета разработали робота по имени Emo, который может убедительно синхронизировать губы с речью и музыкой. Робот освоил этот сложный навык, просматривая видео в сети, демонстрируя, как машины теперь могут учиться, просто наблюдая за человеческим поведением.

Пока крипто-инвесторы ловят иксы и ликвидации, мы тут скучно изучаем отчетность и ждем дивиденды. Если тебе близка эта скука, добро пожаловать.

Купить акции "голубых фишек"

Emo – это не полноценное роботизированное тело; это невероятно реалистичная роботизированная маска, разработанная для изучения человеческой коммуникации. Её кожа сделана из силикона, а 26 крошечных моторов позволяют ей двигать губами, челюстью и щеками с поразительной реалистичностью.

Эти моторы помогают Emo создавать реалистичные движения рта для чёткой речи и пения, охватывая все звуки, необходимые для 24 согласных и 16 гласных. Это было разработано, чтобы Emo казался более естественным и менее тревожным – избегая эффекта ‘зловещей долины’, когда роботы, выглядящие почти как люди, всё ещё могут вызывать странное чувство, потому что их выражения не совсем соответствуют тому, что они говорят.

Как Emo научился синхронизировать губы как человек

Эмо учился поэтапно. Это началось с изучения собственного лица, используя свои моторы для создания различных выражений, глядя в зеркало. Это позволило системе изучить, как конкретные движения влияют на её мимику.

Команда разработала систему, которая связывает звук с движениями тела. Они предоставили ИИ, прозванному Emo, часы видеозаписей с YouTube, на которых люди разговаривают и поют, что позволило ему изучить, как звук соответствует движениям губ.

Система анализировала основные звуки речи, а не слова или их значение. Затем она использовала эти звуковые паттерны для управления мимикой в реальном времени.

Эмо могла синхронизировать губы под музыку на нескольких языках – не только на английском, но и на французском, арабском и китайском – даже несмотря на то, что её специально не обучали этим языкам. Примечательно, что эта же техника работала и для пения, что сложнее из-за того, как удерживаются гласные и меняется ритм.

Эксперты считают это важным, потому что роботы будущего должны будут общаться как люди, чтобы эффективно сотрудничать с людьми. Это развитие происходит в то время, когда растет интерес к использованию роботов как в домах, так и на рабочих местах.

Вау, CES 2026 был невероятным! Я увидел так много удивительных роботов. Boston Dynamics представил там своего робота Atlas, и он, серьёзно, готов начать работать вместе с людьми! Затем была SwitchBot с роботом, который действительно может *готовить* и стирать – это дико! И LG выпускает домашнего робота-помощника, который призван просто облегчить жизнь в доме. По-настоящему казалось, что роботы становятся реальной частью нашей жизни сейчас.

С разработками, такими как искусственная кожа, позволяющая роботам чувствовать вещи, как люди, и реалистичными движениями губ, роботы все чаще выглядят менее механическими и больше как друзья. Хотя Emo пока что является исследовательским проектом, он демонстрирует потенциал роботов в обучении навыкам путем наблюдения и прослушивания, так же, как и люди.

Смотрите также

2026-01-15 21:58