Новый ИИ Facebook может копировать стиль текста с изображения одного слова

Концепция дипфейков многих пугает. В большинстве случаев, когда эти проекты, основанные на искусственном интеллекте, привлекают всеобщее внимание, это происходит потому, что они использовались неэтично.

Мы видели все отрицательные стороны этой технологии, от кражи личных данных до фальшивых новостей. Но Facebook - единственная компания, которая вместо этого хочет использовать его для будущих инноваций.

Что такое TextStyleBrush?

Исследователи из Facebook представили свою новую модель искусственного интеллекта под самостоятельным контролем TextStyleBrush на Новость. Используя всего одно изображение одного слова, он может редактировать и заменять текст, копируя шрифт или визуальный стиль, которым оно было написано.

Инструмент работает как с рукописным текстом, так и с текстом в сценах из реального слова. Это впечатляющий подвиг, потому что, как отмечает сам Facebook, ИИ должен понимать «неограниченные» стили текста.

Существуют не только всевозможные виды типографики и каллиграфии, но и множество стилистических деталей, которые необходимо учитывать. Что делать, если кто-то пишет под наклоном или кривой? Или поверхность, на которой находится текст, затрудняет чтение? А что насчет фонового беспорядка или шума на изображении?

Facebook объяснил, что модель TextStyleBrush работает аналогично тому, как инструменты кисти стиля работают в текстовых редакторах, но для эстетики текста в изображениях:

Он превосходит современную точность как в автоматизированных тестах, так и в пользовательских исследованиях для любого типа текста. (...) Мы применяем более целостный подход к обучению и отделяем содержание текстового изображения от всех аспектов его внешнего вида всего блока слов. Затем представление общего внешнего вида можно применить как однократный перенос без повторного обучения на новых образцах исходного стиля.

Если вы хотите получить более подробную техническую информацию о функциях TextStyleBrush, вы можете прочитать полную статью на Facebook Блог AI.

Мобильное приложение Google Translate имеет функцию, аналогичную новому AI от Facebook, в том, что оно также заменяет текст, но оно направлено на решение другой проблемы. Как следует из названия, вместо этого он переводит текст на язык по вашему выбору.

Связанный: Мобильные функции Google Translate, которые вы должны знать

Лица - не единственное, что можно подделать

Мы слышим об этом исследовании, потому что Facebook надеется, что его публикация приведет к еще большему количеству исследований и обсуждений атак deepfake text.

В мире технологий часто говорят о том, насколько опасны дипфейки на лицах, но нечасто обсуждают Достаточно того, как теперь можно использовать технологии для создания убедительных подделок почерка, вывесок, и т.п.

Facebook утверждает, что если исследователи и практики ИИ смогут опередить злоумышленников, тогда будет легче обнаружить злонамеренное использование дипфейков и создать системы для борьбы с ними.

Создать эти убедительные дипфейки Тома Круза было непросто

Нет, это действительно не Том Круз трюк на TikTok.

Читать далее

Об авторе