За прошедший год Microsoft получила широкую критику за введение функций, которые могут поставить под угрозу безопасность пользователей, и в некоторой степени мы согласны с тем, что в некоторых случаях компания переступала черту, особенно с критикой EEF. Но ответ Microsoft на обвинения в сборе ненужных пользовательских данных никого не убедил в каком-либо другом поведении. В конце концов, похоже, что Microsoft получит еще больше критики со стороны клиентов, если ее последняя функция подачи заявки на патент запустится.

Компания называет свой программный продукт для подачи патентов «Формулировка запросов через Task Continuum» и заявляет, что она сделает обмен приложениями в реальном времени более легким и удобным, что позволит пользователям принимать более обоснованные решения при выполнении поиска., Например, поиск может быть улучшен, если имеется достаточная информация относительно цели пользователя.

Microsoft разработал пример: если кто-то работает над проектом, связанным с танцами, чтобы собрать связанные данные из браузера, ему нужно будет ввести свои требования в строку поиска, если у самого браузера нет инстинкта или невольного предложения вообще.,

Microsoft поддерживает эту идею, утверждая, что в их нынешней модели программного обеспечения приложения заключены в свои собственные хранилища, что в конечном итоге наносит ущерб производительности и росту.

Первое приложение не предоставляет браузеру неявные подсказки относительно того, что может искать пользователь, когда происходит переключение с первого приложения на второе приложение.

Пользователь воспринимает задачи в совокупности. Тем не менее, поскольку приложения обычно отключаются и никак не опосредуются операционной системой, вычислительная система не имеет представления об общей цели пользователя.

Согласно Microsoft, возможное решение этой проблемы состоит в том, чтобы иметь нейтрального стороннего арбитра для мониторинга и изучения поведения и намерений пользователя с помощью механизма обработки текста, чтения PDF-файлов, сравнения и анализа недавно взаимодействующих изображений, идентификации звуков и музыка, регистрация часто отмеченного местоположения и другие связанные контекстные данные. И после сбора этих данных в реальном времени посредник может накапливать все это, удаляя любую идентифицирующую информацию и предоставляя Bing соответствующую информацию, обеспечивая автоматические, точные и сфокусированные результаты.

Патент отмечает:

Раскрытая архитектура содержит компонент-посредник (например, API (интерфейс прикладных программ) как часть операционной системы (ОС)), который идентифицирует задействованные приложения - приложения, с которыми взаимодействует пользователь для выполнения задачи (в отличие от неактивных приложений - приложения пользователь не взаимодействует для выполнения задачи), а также собирает и активно отслеживает информацию из задействованных приложений (например, текст, отображаемый непосредственно пользователю, текст, встроенный в фотографии, отпечаток песни и т. д.), чтобы вывести рабочий контекст пользователя, Затем выведенный контекст может быть передан одному из приложений, такому как браузер (выведенный контекст в форме, которая не пересекает барьер конфиденциальности), чтобы обеспечить улучшенное ранжирование для предложенных запросов через предпочтительного поставщика поиска. Поскольку контекст выводится в понятиях, PII (личная информация) не передается без согласия пользователя - для поисковых систем предоставляются только контекстные понятия очень высокого уровня.

Архитектура позволяет захватывать сигналы (например, простой текст, отображаемый пользователю, текст, распознаваемый из изображений, аудио из воспроизводимой в настоящее время песни и т. Д.), И группирует эти сигналы в контекстные концепции. Эти сигналы представляют собой данные высокого уровня (например, слова), которые помогают идентифицировать то, что делает пользователь. Этот акт захвата сигналов является временным в том смысле, что он может постоянно изменяться (например, аналогично скользящему среднему из контекстных концепций). Сигналы могут непрерывно изменяться в зависимости от того, что пользователь делает в момент времени T (и что пользователь делал от T-10 до момента времени T).

При использовании приложения браузера в качестве приложения, которое использует захваченные сигналы, браузер передает и принимает (например, непрерывно, периодически, по запросу и т. Д.) С посредническим компонентом через посреднический API посреднического компонента, чтобы получить самую последнюю контекстную информацию. концепции.

Когда пользователь в конечном итоге взаимодействует с браузером или ожидается, что он будет взаимодействовать с ним (что может быть вычислено как часто встречающееся и / или основанное на истории последовательных действий пользователя, которые приводят к тому, что пользователь затем взаимодействует с браузером), контекстные концепции отправляются поисковому провайдеру вместе с префиксом запроса. Поисковая система (например, Bing ™ и Cortana ™ (интеллектуальный персональный помощник по распознаванию цифровой речи) корпорации Microsoft) использует контекстные ранжеры для настройки ранжирования по умолчанию для предложенных по умолчанию запросов, чтобы создавать более релевантные предлагаемые запросы на данный момент времени. Операционная система, содержащая функцию компонента-посредника, отслеживает все текстовые данные, отображаемые пользователю любым приложением, а затем выполняет кластеризацию для определения намерения пользователя (контекстуально).

Предполагаемое намерение пользователя, отправляемое в качестве сигнала поставщикам поиска для улучшения ранжирования предложений запросов, позволяет соответствующим образом улучшить взаимодействие с пользователем, поскольку предложения запросов в большей степени соответствуют тому, чего на самом деле пытается достичь пользователь. Архитектура не ограничивается текстом, но может использовать распознанный текст на отображаемых фотографиях, а также информацию о географическом местоположении (например, систему глобального позиционирования (GPS)), предоставленную как часть метаданных фотографии. Аналогичным образом, другим сигналом может быть звуковой отпечаток текущей воспроизводимой песни.

Как указано, устранение неоднозначности в запросе разрешается благодаря контекстному и общему кешу, который может использоваться различными приложениями для повышения релевантности поиска, конфиденциальность поддерживается, поскольку только одно минимально достаточное количество информации отправляется из одного приложения в другое приложение, и выводится Пользовательский контекст может использоваться всеми приложениями, компонентами и устройствами.

Компонент-посредник может быть, например, частью ОС и / или отдельным модулем или компонентом, взаимодействующим с ОС. Как часть ОС, компонент-посредник идентифицирует задействованные не-ОС-приложения на устройстве и собирает и активно отслеживает информацию из задействованных приложений, чтобы вывести рабочий контекст пользователя. Выведенный контекст может затем быть передан в одно из приложений, например в браузер, безопасным способом, чтобы обеспечить улучшенное ранжирование для предложенных запросов через предпочтительного поискового поставщика.

Конечно, основной проблемой для пользователей является угроза скомпрометированной информации, от которой ни одна гарантия со стороны Microsoft не может избавить. Идея патента в некоторой степени похожа на Google Now on Tap или Screen Search, инструмент, который очищает рабочий экран для контекстной информации и запускает поиск Google в ответ - хотя последняя идея гораздо более автономна.

Компания заявляет, что может представить этот посредник либо как встроенную функцию, либо как дополнительный модуль, который можно установить в Windows 10. Если это последний случай, то эта платформа может революционизировать автоматический поиск и потенциально стать мощным инструментом для контекстуальной осведомленности. вычисления. Но опять же, если будет введена встроенная функция, ОС будет работать устаревшим с личного уровня, и большинство пользователей будет искать выход из функциональности.