Евгений Технология «Спектр» Яндекса и классификация веб-страниц Трофименко Евгений контакты услуги seo-сервисы

Евгений Как угадать намерения пользователя? раньше Василий Иваныч: - Петька! Приборы! Петька: Двадцать! В.И.: - Что двадцать?!! П.: А что приборы?!! теперь Василий Иваныч: - СПЕКТР! Приборы! СПЕКТР.: Вы хотите: Купить приборы? Смотреть фото приборов? Почитать отзывы о приборах? Ударить приборы ногой? Снять показания приборов? В. И.: - Два наряда вне очереди!

Евгений «спектр»: намерения пользователя a-plakhov: Когда пользователи задают запросы к Яндексу, примерно в 20% случаев они формулируют запрос неоднозначно. Например, по запросу [наполеон] кто-то хочет найти полководца, а кто-то – рецепт торта. А задавая запрос [суши], человек может искать и ресторан с доставкой на дом, и рецепт блюда......мы внедрили новую поисковую технологию, которая умеет учитывать множество неявных целей пользователей и показывать соответствующие ответы... В основе работы «Спектра» лежит статистика поисковых запросов. Система исследует запросы всех пользователей Яндекса и выделяет в них различные объекты... Кроме того, «Спектр» умеет учитывать при поиске различные потребности пользователей. У каждой категории есть список возможных потребностей – тех намерений, с которыми пользователи ищут тот или иной объект. Например, когда люди ищут какой-нибудь товар, они, как правило, хотят купить его или почитать отзывы и обзоры. То есть для категории «товары» среди потребностей будут «купить», «отзывы» и «обзоры»... «Спектр» анализирует поисковые запросы полностью автоматически...

Евгений как работал* «спектр» в начале классификация всего найденного? (*) подсвечивал? Пример: запрос «ноутбуки». Ввод СПЕКТРа, зима Виды тематик найденных результатов: 1.Тема страницы: «новые, купить» Подсвечены в сниппете: продажа, цена, купить, каталог, новые, т.п. 2. Тема страницы: «б/у» Подсвечены в сниппете: б/у, подержанные, т.п. НЕ Подсвечены: продажа, цена, ремонт 3. Тема страницы: «ремонт» Подсвечены в сниппете: ремонт, т.п. НЕ Подсвечены: продажа, цена, б/у Тематики раздельные, доп. слова не пересекаются.

Евгений как «спектр» работает теперь подмешивание отдельных рез-тов * запросы настраиваются отдельно! Для запроса выделяется список доп. интентов (~намерений, тематик), в выдачу добавляются результаты из отдельной базы классифицированных страниц (по соответствию тематике). Подсветка «спектровых» слов в «обычных» результатах Подсветка всех «спектровых» слов независимо от интентов (тем) Подмешивание – это костыль. «Автофургоны» забивают выдачу. Бывает несколько примесных результатов по одному интенту. (*) еще один признак костыля

Евгений Теперь – подсветка всего:

Евгений Одна тема - несколько результатов:

Евгений как отличить спектровую примесь? По идентификатору документа в XML-выдаче. Обычный документ: 4 фрагмента СПЕКТР: 3 фрагмента Быстроробот: 3 фрагмента Ультраробот (сейчас нет): 2 фрагмента

Евгений подсветка спектровых слов, ограничения и как их обойти Теперь все дополнительные слова подсвечиваются в выдаче независимо от классификации. Подсветка спектровых слов идет и на спектровой примеси, и на обычных документах. Однако для продвижения … Ограничение – подсветка (как и примесь) идет только по первой десятке (не обходится увеличением numdoc) Ограничение обходится поиском внутри сайта (ограничением параметрами serverurl, surl и перебором большого количества путей внутри сайта). Так можно взять подсвеченные спектром в сниппетах слова по всем страницам сайта.

Евгений база пробивки «спектр»а: 6.5М запросов, лето 2011 Для 5% запросов есть спектровые примеси (325К из 6.5М) А один ли результат в примеси? примесных результатовзапросов% % % % % %

Евгений Большое число спектровых результатов в десятке для… Особенно непонятных запросов. «Петька! Приборы! -двадцать!» запрос спектровых результатов в топ10 я10 о войне перми9 казани9 новосибирска9 одессы9 харькова9 виктора цоя9 про собак8 феодосии8 из фильмов8 волгограда8

Евгений доп. тематики «спектр»а запрос [казани] – 7 из 10 1 Карта КазаниКарта Казани 2 Достопримечательности Казани -... Татарстана. Туристу о Казани, Елабуге...Достопримечательности Казани -... Татарстана. Туристу о Казани, Елабуге... 3 Новости | Казанский ПорталНовости | Казанский Портал 4 Гостиницы в КазаниГостиницы в Казани 5 Город КазаньГород Казань 6 2ГИС карта Казани с улицами и домами, справочник организаций2ГИС карта Казани с улицами и домами, справочник организаций 7 Карта КазаниКарта Казани 8 Недвижимость в Казани из рук в руки: объявления о продаже...Недвижимость в Казани из рук в руки: объявления о продаже... 9 Журнал КАЗАНСКАЯ НЕДВИЖИМОСТЬ:... офисов в городе Казани...Журнал КАЗАНСКАЯ НЕДВИЖИМОСТЬ:... офисов в городе Казани GISMETEO.RU: Погода в Казани на сегодня, завтра. Прогноз погоды...GISMETEO.RU: Погода в Казани на сегодня, завтра. Прогноз погоды...

Евгений А вот запрос [казань] «спектр»а нет вообще… 1 Город КазаньГород Казань 2 Казань ВикипедияКазань Википедия 3 Туристический портал г.Казань - города с тысячелетней историейТуристический портал г.Казань - города с тысячелетней историей 4 VIP Казань Казань для достойных людейVIP Казань Казань для достойных людей 5 Город Казань - Портал Казань 24Город Казань - Портал Казань 24 6 Казань: ruKazan - сайт города Казани, клубы, работа, вакансии, магазины...Казань: ruKazan - сайт города Казани, клубы, работа, вакансии, магазины... 7 КазаньКазань 8 Казань по-новому. Новости, квартиры, работа, погода, объявления...Казань по-новому. Новости, квартиры, работа, погода, объявления... 9 Казань. Информационный портал города - ГлавнаяКазань. Информационный портал города - Главная 10 Моя Казань - информационно-развлекательный портал городаМоя Казань - информационно-развлекательный портал города

Евгений самые частые сайты, которые попадают в примесь Некоторым везет больше. Некоторым (сова72, автофургоны) везет временно. сколько раз встретился сайт в СПЕКТРесайт 11941www.torrentino.com 5657www.zaycev.net 4750www.fast-torrent.ru 3845nnm-club.ru 3024www.slovopedia.com 2811bigtorrent.org 2725tfile.ru 2652musicmp3.spb.ru 2561best-mp3.ru 2460www.rutor.org

Евгений «Узнать или купить? Классификатор страниц обзоров и интернет-магазинов» Braslavski P. I., Yandex, Kiselev Yu. A., Ural Federal University Решается похожая проблема – выяснение намерения пользователя. Shop classifier Term features. We identifi ed the most informative term-features based on mutual Information … As expected, the most contrasting terms were магазин, рубль, каталог, цена, прайс, and корзина …The full list of terms used for classifi cation consisted of about one hundred terms. Lexical features. We used the list of trademarks and brands Review classifier Term features... lexical variety of reviews is much higher than that of shop pages, the list of contrasting words was much longer and exceeded 7,000 words. Lexical features. The list of 165 manually collected appraisal adjectives хороший, прекрасный, великолепный, плохой, отвратительный, ужасный, etc. (good, excellent, magnifi cent, bad, disgusting, awful, etc.)

Евгений «Тематические» слова Самые частотные тематики – фильмы, торренты, mp3 «Новизна» (2011), отзывы, карты, т.д. … Это верхушка. Но для классификации используются даже такие служебные слова, как сайт и меню. доп. слововстретилось скачать mp онлайн20833 отзывы20781 торрент16200 смотреть15964 фото игры14087 перевод12859 бесплатно11321 карта10222 ооо10136 инструкция8773 фильмы6894 аккорды6859

Евгений … и многословные фрагменты Выделение фрагментов из нескольких слов целиком: на дом Только классификация СПЕКТРом или учет в ранжировании?

Евгений многословные фрагменты в «спектр»е Встречались в 20-25% спектровых примесей (общим числом 83К) А уникальных: 127 штук! Очевидно, они сделаны вручную. многословный фрагментвстречался% что такое % смотреть онлайн % текст песни % своими руками % в домашних условиях % прогноз погоды % отзывы владельцев % слова песни % тексты песен % скачать драйвера % на карте9921.2% технические характеристики9701.2% онлайн смотреть8991.1% краткое содержание7410.9% карта города6810.8% скачать драйвер6340.8%

Евгений Что делать? 1.Качественный сайт. (*) Некоторые сайты подмешиваются чаще. (*) это слишком сложно!!1 2. Выяснять классификационные слова и многословные фрагменты для ваших запросов (запросы м.б. на разные тематики) 3. Не стесняться их употреблять в тексте. 4. Польза не при ранжировании, а при классификации и подмешивании.

Евгений FIN. Технология «Спектр» Яндекса и классификация веб-страниц Трофименко Евгений контакты услуги seo-сервисы