Как Adobe применяет нейросети в своих продуктах?
В начале ноября прошла ежегодная конференция Adobe Max 2016. На ней собираются представители профессий, которые постоянно работают с Creative Cloud: художники, дизайнеры, видеомонтажеры, фотографы. Они обсуждают инновации, которые компания добавляет в свои продукты. Основной фокус сегодня на функциях, работа которых возможно благодаря самообучающимся нейросетям.
Их возможности поражают — имитация голоса со звукозаписи, редактирование панорамного видео в шлеме VR, создание векторных изображений из фотографий, определение кульминационных моментов в видео и музыке. Ниже описаны 9 функций, которые уже есть или совсем скоро появятся в Adobe Creative Cloud. C ними люди творческих специальностей смогут выполнять стоящие перед ними задачи еще быстрее и эффективнее.
К каждому пункту в статье есть видео. Их стоит смотреть для того, чтобы убедится с какой ювелирной точностью работают нейросети сегодня.
1. Voco
Скоро Adobe выпустит свой звуковой редактор. Он сможет имитировать голос любого человека, запись речи которого ему удастся проанализировать (для максимальной точности достаточно 20 минут монолога). Работает это так: человек говорит какие-то фразы, программа записывает его и отображает звуковую дорожку в виде текста. В нем можно менять местами слова/слоги и собирать на их основе новый текст.
Такое звукомонтажеры могли делать и раньше, но тяжело и медленно. Voco сократит временные затраты на этот процесс в десятки раз. Здорово было бы воскресить таким образом голос, к примеру, Юрия Левитана и озвучивать им новые документальные фильмы.
Видео с презентации
2. CloverVR
До появления этой технологии обрабатывать 360° видео для шлемов виртуальной реальности было очень трудоемким делом, так как трудно было понять как оно будет выглядеть в конечном формате. Теперь во время монтажа можно ощущать себя внутри ролика и при редактировании сразу видеть, как все будет выглядеть в VR. Был бы шлем.
Видео с презентации
3. ConceptCanvas
Поиском фотографий, на которых есть человек (или другой определенный объект) сегодня никого не удивишь. А эта замечательная технология способна отыскать изображения, где человек (или другой объект) будет находится четко в левой части фото, справа или по центру. И даже «чтобы человек был слева, а собака справа», «человек под зонтиком» или «человек под зонтиком во время дождя». Пространственные отношения между объектами задаются в виде графической схемы.
Видео с презентации
4. InterVector
Преобразование растровой графики в векторную тоже постоянно совершенствуется. На видео мужчина взял фото своей игрушечной свиньи (оригинал у него в руках) и за пару минут сделал из нее вполне внятный симпатичный рисунок. Есть некоторые неровности, но за 15–20 минут их можно поправить. Это во много раз быстрее отрисовки вручную.
Видео с презентации
5. Stylit
Теперь художник может с помощью графического планшета раскрашивать трехмерные объекты. И его индивидуальный стиль бумажного рисунка удивительно точно отразится в компьютерной графике.
Видео с презентации
6. Wetbrush
Эта технология позволяет рисовать с помощью 3D-модели художественной кисти. С помощью мыши или тачпада можно очень тонко регулировать ее наклон и силу нажатия. А редактирование нарисованного на виртуальном 3D-холсте производится теми же приемами, что и изменение «живых» слоев масляной краски в реальной жизни.
Видео с презентации
7. SkyReplace
Иногда в пасмурную погоду могут получаться божественные пейзажи, но чаще тучи несколько портят потенциально удачные кадры. Эта технология позволяет в один клик заменить небо на фотографии небом с другой картинки. Освещение остальных предметов меняется автоматически.
Видео с презентации
8. ColorChameleon
Эта технология пригодится тем, кому приходится делать открытки и рекламные буклеты на основе фотографий. Она умеет идеально подбирать такие цвета для надписей и рамочек, которые заставят снимки выглядеть ощутимо привлекательнее и интереснее.
Видео с презентации
9. Syncmaster
Adobe Premier Pro теперь может автоматически найти самые эффектные фрагменты в саундтреке и наложить их на самые яркие моменты видео.
Видео с презентации
Еще раз напомню, что все это уже доступно в Adobe Creative Cloud или вот-вот появится в нем. И каждый человек с достаточно мощным компьютером и возможностью платить 1500 рублей в месяц сможет воспользоваться этими удивительными технологиями.
