Нейросети научились реалистично озвучивать видео с YouTube

Нейросети уже умеют рисовать мультики, генерировать лица и даже превращать фотографии в картины. Новый шаг — работа с видео и звуком.

Ученые из Университета Северной Каролины в Чапел-Хилл при поддержке Adobe Research разработали алгоритм для создания реалистичной звуковой дорожке к видео. Результат получился убедительным: поучаствовать разницу между реальной и сгенерированной дорожкой довольно сложно. Для машинного обучения использовалась база Google Audioset, состоящая из 2 миллионов 10-секундных роликов YouTube.

С каждым днем искусственный интеллект становится немного умнее. Ранее мы рассказывали о боте @youtubeartifact, который создает шедевры импрессионизма на основе роликов YouTube. В обзоре Edutainme можно найти еще 12 ботов, которые призваны сделать нашу жизнь проще, интереснее и познавательнее.