Мы испытали на прочность алгоритм Microsoft, придумывающий подписи к фото
Компания Microsoft разработала приложение CaptionBot, которое создает подписи к фотографиям пользователей. Схема работы проста – снимок можно загрузить или же просто указать ссылку на него, после чего бот выдает описание того, что видит на изображении.
CaptionBot работает на базе двух нейросетей – одна распознает снимки, а вторая занимается обработкой текстов – подписей под фото, которые размещают пользователи интернета. Приложение не всегда корректно работает – ошибки чаще всего случаются в более абстрактных изображениях.
Сперва все было хорошо.
С киевскими видами он справился нормально.
Правда, даже алгоритм Microsoft считает киевские МАФы зданиями.
Но затем алгоритм внезапно посчитал, что депутаты в Верховной Раде – это пончики. Хотя…
Эмоции поднятого на руки экс-премьера алгоритм определил правильно.
Он также философски заметил, что нелегальная торговля у метро – это люди, стоящие на чемодане.
А вот с кровянкой алгоритм прогадал, приписав ей в составе брокколи. Как бы не так.