Компьютер научили описывать картинки для незрячих людей18.10.2020 22:16

Не хуже, чем это сделал бы человек

dcf258cb5b3fc29a782d6cecf041f1e9baaf27df

Microsoft представила улучшенную версию системы, которая может описывать картинки для незрячих людей. Если применить её к фотографии собаки, то компьютер напишет, что на снимке запечатлён пёс, и расскажет, что он делает.

Утверждается, что система делает описания с человеческой точностью. В основе её лежит алгоритм, который генерирует субтитры и подписи для веб-страниц и документов.

Это уже вторая версия системы. Первую Microsoft применяла в приложении для слабовидящих Seeing AI. Новинка повысит точность приложения. Система сможет и идентифицировать объекты, и даже находить между ними связи. Благодаря этому алгоритм способен написать, например: «человек сидит на стуле и играет на гитаре» вместо «человек, стул, гитара».

Систему встроят в Word, Outlook и PowerPoint. Там она будет использоваться для автоматической подписи изображений, если они есть.