Продвигаем бизнес в Интернете с 2001 года

Флексум - народный поиск

Флексум - это продолжение 'Персональных поисковиков' Новотеки: новый красивый интерфейс, новые настройки, а самое главное - возможность совместной работы над поиском

Последнее обновление: 10 октября 2018 года
2954

В этом мае СМИ очень много внимания уделяют Интернету, интернет-маркетингу и интернет-проектам. На прошлой неделе Игорь Ашманов почти все свое рабочее время тратил на журналистов и фотографов.

Статья в 'Ведомостях' под названием 'Знают, но молчат' про риски интернет-проектов. Интервью с Игорем Ашмановым в 'Компьютерре' по мотивам 'Жизнь внутри пузыря'. 'Коммерсантъ Деньги' публикует статью про рынок поисковой оптимизации, про 'белых', 'серых' и 'черных'. В журнале 'Профиль' тема номера - Интернет, опубликована статья 'Находчивые хотятбыть найденными' про бизнес поисковой оптимизации (файл со статьей можно скачать в блоге Анара Бабаева).

Вобщем, интерес к SEO растет. Как мне кажется, осенью можно ждать апогея. Мы уже начали готовиться к шестой оптимизаторской конференции. Будет интересно, следите за анонсами.

Напомним, что вы можете прислать любые вопросы в рубрику "Контекстная реклама: вопросы и ответы" на адрес subscribe@ashmanov.com. Мы обязательно дадим подробный ответ и опубликуем его в рассылке.

Флексум

На прошлой неделе компания 'Поисковые технологии' официально представила новый сервис Флексум. Флексум - это продолжение 'Персональных поисковиков' Новотеки: новый красивый интерфейс, новые настройки, а самое главное - возможность совместной работы над поиском, то есть создание коммьюнити вокруг тематического поиска. Сегодня на Флексуме уже более 2000 пользователей и более 600 созданных поисковиков.

Подробнее прочитать про открытие Флексума можно на Вебпланете, в Коммерсанте или на TelNews. Специально для рассылки я задал несколько вопросов Андрею Калинину, руководителю проекта Флексум. Публикуем его ответы.

1) Как ведет себя поисковый робот Флексума? Соблюдает ли он инструкции файла robots.txt, понимает ли тег noindex?
Робот выкачивает сайты по тем определениям, которые дал ему пользователь. То есть, он начинает с указанных точек входа, скачивает их и, если глубина выкачки позволяет, выделяет оттуда ссылки. Проверяет ссылки на соответствие параметрам выкачки, указанным автором (ограничивающие и обеляющие маски, выход за пределы каталога), добавляет подходящие ссылки в очередь выкачки, после чего выкачивает страницы из очереди и т.п.

Робот соблюдает robots.txt и не качает лишнего, а индексатор понимает тег noindex и не добавляет в поисковый индекс данные внутри этого тега.

2) Что такое квота? Для чего она может пригодиться?
У нас есть две квоты: общая для пользователя и квота для сайта. Общая квота это ограничение на суммарный объем всех html-ных страниц, который может быть выкачан роботом для поисковиков пользователя. Сейчас для каждого нового пользователя выделяется общая квота в 200МБ, которая при заполнении может быть доведена шагами по 200МБ до 1ГБ.

Квота для сайта - это назначаемый пользователем параметр, позволяющий ограничить объем выкачки с данного сайта, то есть если для некоторого сайта указано ограничение выкачки в 100МБ, то с него не будет выкачано более 100МБ. Нужно понимать, что если сайт прекратил выкачиваться именно из-за использованной квоты, то это ошибка, которую автор поисковика должен исправить. Ведь нельзя же считать сайт полноценно выкачанным, если от него в поиске участвует только половина его страниц, причем какая конкретно половина используется, определяется не желанием пользователя, а алгоритмом обхода сайта нашим роботом.

Если квота под один сайт была выбрана, то нужно либо увеличить квоту, либо попытаться оценить, какие документы были проиндексированы и не попало ли в результаты поиска лишнего. В этом случае нужно воспользоваться механизмом создания нескольких точек выкачки, попробовать указать ограничивающие маски.

Вообще, несмотря на то, что квоты являются ограничением нашего сервиса, они заставляют автора более точно описывать сайт и, как следствие, получить лучший поиск за счет лучшего отбора страниц.

3) Если увеличить квоту у одного сайта (скажем до 40 мегабайт), то у других будет индексироваться меньший объем?
Не обязательно. Если суммарная квота всех сайтов меньше общей квоты авторов, то все сайты будут индексироваться в пределах своей квоты. В противном случае, первый сайт, на котором будет выбрана общая квота, выкачается частично, а следующие за ним сайты не выкачаются совсем.

Мы думаем над тем, как уйти от фиксированных квот в мегабайтах, попытаться вычислять квоты динамически в зависимости от важности сайтов и общей квоты, но пока что не очень получается сформулировать понятный для автора алгоритм распределения мегабайтов его общей квоты по сайтам.

4) Как долго индексируются сайты?
Вообще, один сайт индексируется недолго; однако, я думаю, что вопрос скорее подразумевает как скоро будут проиндексированы сайты после добавления автором. Могу гарантировано сказать, что новые сайты будут проиндексированы в течение 12 часов, обычно значительно быстрее.

5) Сможет ли автор поиска влиять на релевантность результатов созданного поиска?
Да, автору доступны для этого два инструмента. Во-первых, возможность назначения рейтинга сайтам в поиске; во-вторых, возможность написания собственных статей под определенные автором запросы к поисковику. Тогда первым результатом соответствующего запроса всегда будет написанная автором статья.

6) По какому принципу строится рейтинг участников Флексума?
Рейтинг символизирует качество поисковиков, созданных автором, их востребованность, социальную активность самого автора. Алгоритм расчета рейтинга мы не публикуем. Со временем, кстати, он может меняться.

7) Какое развитие ждет Флексум в ближайшее время?
В ближайшее время появится:

  • возможность задавать маски индексации. То есть, сейчас все что выкачал робот попадает в индекс, включая индексные страницы, вся ценность которых в навигационных ссылках, дающих доступ к информационным документам. Маски индексации позволят выкачать навигационные страницы, но исключить их из индексации и тем самым улучшить качество поиска
  • выкачка RSS-потоков
  • прием webmoney и биллинг, соответственно авторам будет проще воспользоваться нашими платными услугами
  • увеличение общей квоты автора, снижение тарифов
  • возможность импорта большого количества сайтов из XML или CSV форматов
  • особый интерфейс для опытных авторов, позволяющий проще работать с большим количеством сайтов

Кроме того, мы постоянно работаем над улучшением качества самого поиска и построением рефератов поисковой выдачи.

8) Будет ли в будущем возможность устанавливать приоритеты сайтам в зависимости от географии пользователя?
Если будет востребованность в такой функциональности, то мы можем ее добавить. Пока что таких запросов от пользователей еще не было.

Похожие страницы дополнительно в Яндексе

Недавно пользователи заметили, что на последней странице в результатах поиска Яндекса появилась ссылка 'Из результатов поиска исключены слишком похожие страницы. Показать все без исключения'. Переходя по этой ссылке пользователь получает чаще всего большее количество найденных страниц. Если присмотреться к URL этой ссылки, то оказывается, что это знакомый оптимизаторам параметр rd=0, который скрывает похожие сниппеты в поисковой выдаче. Видимо, Яндекс решил официально пристроить эту возможность, о которой стало известно на четвертой оптимизаторской конференции. Кстати, эта ссылка явно напоминает аналогичную 'Если вы хотите, можно повторить поиск, включив опущенные результаты' в Google, так называемые Supplemental Results.

Технологии Новотеки доступны для всех

Компания 'Поисковые технологии' открыла 'витрину технологий' Новотеки. Витрина - это описание всех технологий Новотеки, готовых для повсеместного использования владельцами интернет-проектов. Часть услуг имеет бесплатный вариант с условием установки информера Новотеки на сайт вебмастера, например, установка на сайт поискового движка. Среди сервисов такие уникальные, как авторубрикация (определение тематики текстов) и сюжетирование (объединение новостей в сюжеты).

Cеминары 'Работающий сайт' и 'Эффективное продвижение сайта в поисковых системах'

Компании 'ITECH' и 'ВебПроекты' проводят семинары в Москве: 5 июня 'Работающий сайт' и 6 июня 'Эффективное продвижение сайта в поисковых системах'. Программа двух дней предназначена для тех, кто хочет получить полную информацию о комплексе разработки и продвижение сайта в качестве бизнес-инструмента. Подробная информация и регистрация на сайте www.it-trainings.ru.

Спутниковые снимки Москвы

На Яндекс.Картах теперь есть спутниковые снимки Москвы. Судя по некоторым наблюдениям, снимки относительно свежие - примерно лета 2006 года. Наверняка теперь часть пользователей будет искать московские адреса именно на картах Яндекса, а не на спутниковых картах Google, тем более что у последних часто случаются ошибки при поиске русскоязычных адресов. Тем не менее, у карт Google сохраняются некоторые преимущества: они имеют более выскокое разрешение и, самое главное, в базе Google есть спутниковые карты не только Москвы, но и других российсикх городов.

Google покупает FeedBurner

На прошедшей неделе появились слухи о том, что Google собирается приобрести сервис RSS статистики FeedBurner. На известном блоге TechCrunch появилась заметка, в которой автор ссылается на источник, близкий к сделке, и подтверждает покупку. По данным источника сумма сделки около 100 млн. долларов. Если эти две компании действительно соединятся, то это станет, во-первых, еще одним источником для площадок под AdSense, и, во-вторых, еще одной возможностью для заработка блоггеров.

Электронные гривны на Яндекс.Директ

Теперь украинские рекламодатели смогут пополнять счет в Яндекс.Директе с помощью системы электронных платежей Интернет.Деньги. Ранее переводить гривны на этот счет можно было только безналичными платежами.

Оптимист для рекламных агентств

Система контекстной рекламы Оптимист начала официально работать с рекламными агентствами. Агентство может подать заявку на аккредитацию. По идее этот шаг должен увеличить количество рекламодателей в системе. Если в начале апреля в Оптимисте было около тысячи рекламодателей, то в конце мая стало более 1500. Кстати, партнерская программа Альтастат (тоже работающая вместе с Вебальтой) открыла статистику по заработку топ20 вебмастеров (всего активных вебмастеров - более 1100), с отрывом на первом месте вебмастер с заработком $1800 вероятно за день ('приведены данные за текущий платежный период'). При этом не понятно, почему 19 вебмастеров называют двадцаткой.

Вам будет интересно

Хотите обсудить ваш проект?
Напишите нам о своих бизнес-задачах, и мы предложим проверенные решения.

Доставляем экспертный контент

Мы делимся с подписчиками экспертным контентом: отправляем полезные статьи, советы от специалистов, приглашаем на вебинары. Подпишитесь, чтобы узнать больше о продвижении бизнеса в Интернете, наших мероприятиях и репортажах с крупных отраслевых событий. Выберите наиболее удобную платформу для вас и наслаждайтесь контентом!

Нажимая на кнопку «Подписаться», я даю согласие на обработку персональных данных и соглашаюсь c политикой конфиденциальности

Спасибо за подписку!

Мы отправили вам проверочое письмо — пожалуйста, подтвердите адрес электронной почты, перейдя по ссылке внутри письма.

Произошла ошибка

Пожалуйста, попробуйте еще раз