Captionbot от Microsoft описывает изображения, поэтому вам не нужно

Видео: What's new with Microsoft 365 | October 2020 2024

Видео: What's new with Microsoft 365 | October 2020 2024
Anonim

Microsoft запустила инструмент распознавания изображений, который пытается описать содержание изображения. Этот инструмент искусственного интеллекта все еще находится в стадии разработки и постоянно учится на фотографиях, загруженных пользователями.

Что касается точности, то иногда описание является довольно точным, а иногда CaptionBot предлагает описания, которые не имеют ничего общего с изображением. Существуют также случаи, когда приложение не может предоставить описание вообще из-за своего грубого состояния.

Microsoft разработала CaptionBot, чтобы учиться с большим опытом, ожидая, что его заголовки со временем станут более точными. Чем больше фотографий загружают пользователи, тем лучше становится приложение, как описывает себя CaptionBot:

Я могу понять содержание любого изображения и постараюсь описать его так же, как любого человека. Я все еще учусь, поэтому я буду держаться за твою фотографию, но без личной информации.

CaptionBot использует три технологии для описания того, что изображено на картинке: Microsoft Vision, Emotion и Bing Image. Computer Vision API извлекает из изображений богатую информацию для категоризации и обработки визуальных данных, а также для идентификации и извлечения текста из изображения. Emotion API, как следует из его названия, анализирует лица, чтобы определить диапазон чувств, начиная от гнева, презрения, отвращения, страха, счастья, нейтралитета, грусти и удивления. Bing Image ищет в Интернете изображения.

Мы протестировали CaptionBot, и результаты были точными в 50% случаев. Например, мы загрузили две картинки: одну изображает игровую мышь, а другую - колоду карт. В обоих случаях инструмент предполагал, что это был сотовый телефон. С другой стороны, CaptionBot точно распознает людей и лица.

Судя по всему, CaptionBot одержима мобильными телефонами. Один пользователь Твиттера сообщил, что приложение считает Мишель Обаму мобильным телефоном. Чтобы узнать больше забавных подписей к CaptionBot, зайдите на эту страницу в Twitter.

Вы также можете проверить CaptionBot здесь. Попробуйте: вы либо поможете улучшить инструмент, либо посмеетесь!

Captionbot от Microsoft описывает изображения, поэтому вам не нужно