Семантическое ядро Рунета — запросы, частоты, соотношения

СЕМАНТИЧЕСКОЕ ЯДРО РУНЕТА

Напомню терминологию. Семантическое ядро - это список поисковых запросов, по которому оценивается продвижение сайта в поисковых системах. Иными словами, запросы, наиболее близко относящиеся к тематике сайта.

На практике данные о поисковом спросе необходимы для определения целей продвижения и настройки показов контекстных рекламных объявлений. Но есть еще очень интересный теоретический вопрос: а каково "семантическое ядро" всего Рунета? Сколько разных запросов поступает в поисковые системы, какие запросы наиболее популярны?

Решить эту задачу можно довольно простым методом. Сервис статистики поисковых запросов Рамблера выдает результаты при вводе хотя бы первых двух букв слова, входящего в запрос и позволяет использовать символ подстановки. Например, если ввести в поле маску "аа", Рамблер выдаст список всех запросов, в которых обязательно есть слово, начинающееся на "аа" - "аарон шварц", "александра аасмяэ", "кабель аабл-10" и др.

Такимо образом, если мы будем вводить буквосочетания аа, аб, ав... и так далее до яя, то в полученных списках запросов будут абсолютно все слова русского языка, потому что количество комбинаций первой и второй букв при 32-буквенном алфавите (ё - не учитываем) очень невелико, всего лишь 1024 варианта. Этими 1024 запросами в статистику Рамблера мы полностью "накрываем" все множество запросов в эту поисковую систему, при условии, что в запросе есть хотя бы одно слово на русском языке.

Необходимо договориться, какие запросы отбирать для исследования. Конечно, велик соблазн попытаться выкачать всю базу, но для экономии времени мы решили остановиться чуть раньше.

Рамблер показывает (см. скриншот):

1. сколько раз в месяц была показана первая страница с результатами поисков по запросам, удовлетворяющим маске (на скриншоте - маска "пр", всего масок - 1024);
2. для каждого запроса собственно частоту, количество показов первой страницы с результатами поиска;
3. для каждого запроса - количество показов всех страниц с результатами поиска. Например, если пользователь, просмотрев первую страницу, перешел на вторую, то на единичное обращение с данным запросом будет уже два показа страниц с результатами. Если перешел и на третью, то три и т.д. Количество показов больше (иногда равно) частоте запроса, и списки формулировок Рамблер сортирует по убыванию именно количества показов на всех страницах.

В качестве минимального значения количества показов для каждой из 1024 масок было выбрано число 30. Представить себе это можно следующим образом. В выборку попали запросы, которые, минимум, либо повторяются каждый день. Либо, в крайнем случае, всего лишь один раз в месяц, но ценность информации по такому запросу настолько велика, что пользователь, задавший его, не поленился просмотреть 30 страниц результатов поиска.

РЕЗУЛЬТАТЫ

• Всего показов первых страниц с результатами поиска по запросам по маскам от "аа" до "яя" - 185157016.
• Всего показов всех страниц с результатами поиска по запросам по маскам от "аа" до "яя" - 257457490.
• Среднее количество просмотров одним пользователем страниц с результатами поиска - 1,39.
• Показов первых страниц с результатами поиска по запросам с масками от "аа" до "яя" для запросов, количество показов для которых от 30 в месяц и выше - 48372304, или 26,13% от всех запросов.
• Всего формулировок запросов с масками от "аа" до "яя" с количеством показов от 30 в месяц и выше - 267180. Дубликаты удалены. (Например, запрос "тур в египет" будет найден по маске "ту", а также по маске "ег", т.е. в общем списке окажется дважды. "Копия" этого запроса удалена. Аналогично, для других запросов, состоящих более чем из одного слова.)
• Суммарная частота 277180 наиболее популярных запросов Рунета - 28042471 обращений в месяц. В среднем - 101 на один запрос. Медиана (частота запросов в середине ряда) - 35-36 обращений в месяц.
  
  Для данной выборки:
• количество запросов с частотой свыше 300 000 обращений в месяц - 1
• количество запросов с частотой свыше 100 000 обращений в месяц - 4
• количество запросов с частотой свыше 50 000 обращений в месяц - 17
• количество запросов с частотой свыше 20 000 обращений в месяц - 50
• количество запросов с частотой свыше 10 000 обращений в месяц - 119
• количество запросов с частотой свыше 5 000 обращений в месяц - 352
• количество запросов с частотой свыше 3 000 обращений в месяц - 734
• количество запросов с частотой свыше 1 000 обращений в месяц - 2861
• количество запросов с частотой свыше 500 обращений в месяц - 6819
• количество запросов с частотой свыше 250 обращений в месяц - 15856
• количество запросов с частотой свыше 100 обращений в месяц - 44330
• количество запросов с частотой свыше 50 обращений в месяц - 93921
• количество запросов с частотой свыше 30 обращений в месяц - 163384
• количество запросов с частотой свыше 20 обращений в месяц - 218906
• количество запросов с частотой свыше 10 обращений в месяц - 249838
• количество запросов с частотой свыше 2 обращений в месяц - 265034

ВЫВОДЫ

Семантическое ядро Рунета, оказывается, состоит из очень небольшого количества формулировок поисковых запросов - цифра эта порядка 250 тысяч. Именно на 250 тысяч формулировок "раскладывается" постоянный информационный спрос пользователей. Это запросы, которые запрашивают постоянно, не менее одного раза ежедневно. Именно эти запросы определяют "лицо" поисковой системы, качество выдаваемых ей результатов.

Нижняя часть "айсберга" поискового спроса содержит большее количество поисковых запросов, но все они - эпизодические. Вот Тор100 наиболее популярных сегодня запросов с частотами.

1. порно 307356
2. рефераты 109838
3. сонник 105868
4. знакомства 103033
5. реферат 83182
6. гороскоп 82742
7. яндекс 81555
8. скачать 80845
9. работа 79083
10. обои 74794
11. погода 67800
12. чат 66027
13. эротика 65250
14. порно фото 60112
15. фото 59088
16. карта москвы 54196
17. секс 51772
18. игры 46889
19. из рук в руки 45520
20. порно рассказы 43176
21. обои для рабочего стола 43100
22. открытки 39401
23. москва 38227
24. эротические рассказы 37569
25. поздравления 37191
26. мегафон 34750
27. дом 2 33723
28. гадания 33283
29. приколы 33081
30. анекдоты 32669
31. картинки 31469
32. мтс 30535
33. музыка 29907
34. евросеть 28100
35. банк рефератов 27848
36. связной 26189
37. проститутки 25270
38. гадание 24519
39. порнуха 23347
40. чаты 23178
41. показуха 22745
42. билайн 22199
43. санкт-петербург 21731
44. сотовые телефоны 21692
45. мобильные телефоны 21612
46. обои на рабочий стол 21550
47. новости 21312
48. не родись красивой 20471
49. газета из рук в руки 20298
50. переводчик 20195
51. почта 19826
52. футбол 19493
53. тексты песен 18965
54. рассказы 18550
55. эльдорадо 17667
56. школа 17489
57. бесплатно 17479
58. дом2 16897
59. кремлевская диета 16868
60. охбн 16601
61. словарь 16068
62. вакансии 16046
63. сбербанк 16019
64. беременность 15913
65. детское порно 15663
66. мебель 15472
67. сочинения 15447
68. гороскопы 15327
69. екатеринбург 15261
70. тесты 14978
71. толковый словарь 14804
72. комсомольская правда 14789
73. библиотека 14637
74. скачать музыку 14537
75. психология 14407
76. поздравления с днем рождения 14360
77. украина 14075
78. авто 13932
79. кулинария 13821
80. сотовик 13774
81. форум 13653
82. прогноз погоды 13586
83. стихи 13328
84. афиша 13218
85. турция 13217
86. укра 13173
87. аэрофлот 13116
88. нелли уварова 12884
89. электронная библиотека 12723
90. дом-2 12686
91. программы 12614
92. книги 12605
93. свадьба 12336
94. фобос 12260
95. спорт-экспресс 12165
96. резюме 12130
97. аккорды 12074
98. инцест 11753
99. гдз 11693
100. камасутра 11627

P.S. Предложенная картина поискового спроса все же немного неполная. Для полноты необходимо сделать также списки запросов по буквосочетаниям английского алфавита, от "aa" до "zz". Поэтому в выборку не вошел очень частотный "иностранный" запрос mp3 (частота - 44367), а также большинство запросов ненашего автопрома - toyota, mercedes и т.п.

Будущее "Гиперконтекста"

Мы уже писали о запуске "Бегуном" новой системы "Гиперконтекст". Сегодня предлагаем вашему вниманию мини-интервью с Алексеем Басовым – директором "Бегуна", где он делится планами ожиданиями от новой программы - http://www.webplanet.ru/news/short_interview/2005/11/8/basov.html.

Прокомментировать интервью, а также дать общую оценку системе "Гиперконтекст" мы попросили Ивана Севостьянова – руководителя компании WebProjects.ru

- Иван, как Вы считаете, насколько серьезные изменения в области контекстной рекламы в Рунете могут произойти в ближайшее время в связи с выходом Гиперконтекста; и что вы вообще думаете об этом нововведении Бегуна?

Я думаю, что с выходом технологии Гиперконтекст сколь-либо серьезных изменений на рынке контекстной рекламы ожидать не стоит. Несомненно, технология оригинальна, но я не думаю, что ее запуск может серьезно повлиять на рынок контекста. Это технология новая и еще нуждается в обкатке. Позиции Яндекс.Директа уж точно не пошатнутся.

- Насколько сильно, на Ваш взгляд, поможет Гиперконтекст Бегуну в "борьбе" с основным конкурентом-Яндексом, который, как мы знаем, за последние месяцы выпустил несколько нововведений в плане контекстной рекламы.

Я думаю, что Гиперконтекст не сильно поможет Бегуну. С Яндексом все равно тягаться тяжело, как минимум, по двум причинам:

• Формат Гиперконтекста непривычен для конечного пользователя. Очевидно, что должно пройти некоторое количество времени, прежде чем пользователи привыкнут к такому формату рекламы. Некоторых пользователей он даже может раздражать т.к. чем-то напоминает всплывающие окна.
• Поисковый трафик, который дает Яндекс.Директ, все-равно качественнее, чем трафик с тематических сайтов, который предлагается через Гиперконтекст. .

Я думаю, что рекламодатели будут отдавать предпочтение Яндекс.Директу. Точно сказать об эффективности Гиперконтекста в сравнении с Директом тяжело. На самом деле, чтобы оценить эффективность Гиперконтекста, надо проводить серию тестов, тестировать такой формат рекламы на целевой аудитории и оценивать конверсию посетителей с этого типа рекламы. Единственное, чем мне кажется Гиперконтекст может помочь рекламодателям - это увеличить охват аудитории