Google алгоритм для описания изображений естественным языком

22 март 2015 22:44
YNK
Модератор
Модератор
Сообщений: 3544
Больше
Автор темы
Google алгоритм для описания изображений естественным языком #28277
Google создал алгоритм для описания изображений естественным языком , то есть теперь машина может проанализировать картинку и создать текст, описывающий, что на ней изображено. Ранее Google объявил, что значительно усовершенствовал методику обнаружения, классификации и маркировки объектов. Для того чтобы генерировать описание картинок, выделить объекты не достаточно, нужно понимать, что происходит на картинке, как между собой связаны объекты, и нужно уметь передавать это с помощью естественного языка. Для этого Google решил использовать идею из области машинного перевода, когда с помощью рекуррентной нейронной сети фразу из естественного языка преобразует в векторное представление. Это когда эта технология искусственного интеллекта находит определение слов через понимание их связи с другими понятиями, для чего "читает" новостные статьи и учится понимать из них связи между понятиями , то есть понимает, что Париж и Франция связаны между собой также, как Берлин и Германия, то есть как столица и страна, а Мадрид и Италия не имеют между собой такой связи , затем другая рекуррентная нейронная сеть превращает это векторное представление во фразу на другом естественном языке. В случае с изображениями на первом этапе используется свёрточная нейронная сеть , из которой убран последний слой с функцией SoftMax , определяющей вероятность нахождения в изображении того или иного объекта, а вместо этого полученные данные напрямую отправляются в рекуррентную нейронную сеть. Систему обучают добиваясь максимального соответствия текста картинке. Очевидно, сейчас как раз происходит этот ручной процесс, когда через систему прогоняются картинки, заставляя давать им правильное описание, чтоб она в дальнейшем могла это делать без ошибок сама. Как можно убедиться из картинок в посте на данный момент достигнут достаточно хороший результат.
Учитывая что это новость от Posted: Friday, September 05, 2014 можно ожидать, что Google продвинулись дальше и скоро доберется до обработки видео.

Пожалуйста Войти или Регистрация, чтобы присоединиться к беседе.

Модераторы: InexYNKLex
Время создания страницы: 1.190 секунд
Работает на Kunena форум