Нейросети помогут "Яндексу" ответить на нестандартные запросы

Нейросети помогут "Яндексу" ответить на нестандартные запросы
Фото: hitech.vesti.ru

Российский поисковик "Яндекс" объявил о запуске нового алгоритма поиска под названием "Палех", помогающего системе лучше понимать, о чем именно ее спрашивают пользователи. "Палех" позволяет находить страницы, соответствующие запросу не только по ключевым словам, но и по смыслу.

Реализованы новые возможности поискового алгоритма с помощью нейронных сетей. Они призваны улучшить выдачу "Яндекса" по уникальным и низкочастотным запросам. Среди таких запросов, например, детские, когда к поисковику обращаются как к живому собеседнику: [дорогой яндекс посоветуй пожалуйста новые интересные игры про фей для плантика]. Или запросы от людей, ищущих фильм по запомнившемуся эпизоду: [фильм про человека который выращивал картошку на другой планете] ("Марсианин")  или [фильм где физики рассказывали даме про дейтерий] ("Девять дней одного года").

В "Яндексе" часто представляют график частотного распределения запросов к поисковику в виде "жар-птицы", "клюв" которой соответствует наиболее частым коротким запросам ([вконтакте], [погода]), "туловище" – запросам средней частотности, а "хвост" –  многочисленным редким и уникальным запросам. Поскольку "жар-птица" является частым мотивом палехской росписи, новый алгоритм, улучшающий качество поиска в области "хвоста" "птицы", решили назвать "Палех". 

В случае с редкими запросами у поисковика очень мало или вообще нет статистики о том, какие результаты лучше подходят для выдачи. Задача осложняется тем, что далеко не всегда на релевантной страничке встречаются слова из запроса — ведь один и тот же смысл в запросе и на странице может быть выражен совершенно по-разному.

Чтобы решить эту задачу, нейросети "Яндекса" обучили переводить заголовки всех проиндексированных поисковиком страниц в группы из трехсот чисел каждая, максимально точно описывающие их смысл. Такие группы назвали "семантическим вектором". Аналогичным образом в набор чисел можно перевести и текст поискового запроса. Чем ближе семантический вектор запроса к семантическому вектору страницы, тем лучше страница соответствует запросу.

Постепенно обучаясь, алгоритмы "Яндекса" будут все лучше находить подходящие под нестандартные запросы страницы, даже если на странице нет ни одного слова из фигурирующих в запросе.

Источник: блог "Яндекса"

Ещё новости о событии:

"Мы запустили новый поисковый алгоритм — «Палех». Он позволяет поиску Яндекса точнее понимать, о чем его спрашивают люди.
11:33 03.11.2016 Gorod37.Ru - Иваново
Компания Яндекс анонсировала внедрение нового поискового алгоритма — Палех, который строится на обучении искусственной нейронной сети понимать сложные поисковые запросы.
10:13 03.11.2016 Cursiv.Ru - Иваново
Алгоритм назвали «Палех» Компания Яндекс запустила новый алгоритм поиска под названием "Палех", который работает на основе нейронных сетей и позволяет находить ответы на необычные и редкие поисковые запросы.
09:37 03.11.2016 ИД Частник - Иваново
Разработчики утверждают, что график частотного распределения запросов в Яндексе часто представляют в виде птицы, у которой есть клюв, туловище и длинный хвост, как у сказочной Жар-птицы,
18:04 02.11.2016 Департамент Внутренней политики - Иваново
Нейросети помогут "Яндексу" ответить на нестандартные запросы - Вести.Ru
Российский поисковик "Яндекс" объявил о запуске нового алгоритма поиска под названием "Палех", помогающего системе лучше понимать, о чем именно ее спрашивают пользователи.
14:34 02.11.2016 Вести.Ru - Москва
В его основе лежат нейронные сети.  yandex.ru/blog Благодаря «Палеху», Яндекс стал лучше подбирать ответы на редкие и уникальные поисковые запросы.
13:45 02.11.2016 Югополис - Краснодар
Российский поисковик "Яндекс" запустил новый поисковый алгоритм "Палех", в основу которого положены нейронные сети.
13:37 02.11.2016 Петербургский дневник - Санкт-Петербург
shares Яндекс запустил новый поисковый алгоритм «Палех», в основе которого лежат нейронные сети.
13:36 02.11.2016 Searchengines.Ru - Москва
Благодаря Палеху, Яндекс стал лучше подбирать ответы на редкие и уникальные поисковые запросы.
12:36 02.11.2016 Ekaterinodar.Ru - Краснодар
«Палех» - именно так «Яндекс» назвал свой новый поисковый алгоритм для обработки редких запросов на основе нейронных сетей.
12:35 02.11.2016 IvanovoNews.Ru - Иваново
  Российская компания «Яндекс» запустила новый алгоритм поиска, основанный на искусственных нейронных сетях.
12:07 02.11.2016 Газета Республика Татарстан - Казань
Яндекс запустил новый поисковый алгоритм «Палех», в основе которого лежат нейронные сети.
12:37 02.11.2016 Vluki.Net - Великие Луки
Blackberry станет поставщиком программного обеспечения для будущих беспилотных автомобилей Ford.
11:36 02.11.2016 Вести.Ru - Москва
Яндекс запустил новый поисковый алгоритм «Палех», в основе которого лежат нейронные сети.
12:35 02.11.2016 Pln-Pskov.Ru - Псков
 
По теме
28 марта 2024, 20:32 — Общественная служба новостей — ОСН Подросток из Хакасии стала фигуранткой уголовного дела после публикации в своем Telegram-канале сообщения, сообщает управление МВД по региону.
За жестокое убийство мужчина 9 лет и 10 месяцев проведет в колонии строгого режима Мила ГЕНЬ В Москве вынесли приговор мужчине, который убил коллегу и выкинул тело с балкона Фото:
28 марта 2024, 19:52 — Общественная служба новостей — ОСН Родной брат одного из подозреваемых в совершении теракта в подмосковном «Крокус Сити Холле» Далержона Мирзоева* четыре года жил в Сирии .
28 марта 2024, 19:55 — Общественная служба новостей — ОСН Военный эксперт Михаил Тимошенко обратил внимание на то, что Вооружённые силы Российской Федерации собираются нацелиться на Харьковскую область.
Успеть за шесть минут - Район Арбат Эвакуация учащихся Колледжа права им. Н.С. Киселевой при Московском государственном юридическом университете имени О.Е.
Район Арбат
IMG 7951 1 - Государственный университет управления 26 марта 2024 года прошло заседание ученого совета ГУУ. Встречу начали с минуты молчания в память о жертвах теракта, произошедшего 22 марта в «Крокус сити холл».
Государственный университет управления
ХХV Конгресс педиатров России - ГБУЗ Морозовская ДГКБ ДЗМ В марте 2024 года в Москве прошел ХХV Конгресс педиатров России с международным участием «Актуальные проблемы педиатрии».
ГБУЗ Морозовская ДГКБ ДЗМ
СОТРУДНИКИ РОСГВАРДИИ ОЦЕПИЛИ ОБНАРУЖЕННЫЙ В МОСКВЕ СНАРЯД - УВО ВНГ по Москве На северо-западе столицы сотрудники вневедомственной охраны Главного управления Росгвардии по г. Москве обеспечили безопасность на месте обнаружения снаряда времен Великой Отечественной войны.
УВО ВНГ по Москве
Старший научный сотрудник фонда Исторического театрального костюма Малого театра Полина Буховец с платьем, в котором народная артистка СССР Элина Быстрицкая в роли Глафиры появлялась в финале комедии «Волки и овцы». Фото: Анна Малакмадзе, «Вечерняя Москва» - Москва.Центр Старший научный сотрудник фонда Исторического театрального костюма Малого театра Полина Буховец с платьем, в котором народная артистка СССР Элина Быстрицкая в роли Глафиры появлялась в финале комедии «Волки и овцы».
Москва.Центр