Казань, 29.09.2011

Команда веб-поиска

Михаил СенинАлександр Шубин

Решение типовых задач с помощью сервиса Яндекс.Вебмастер

Взаимоотношения

Он думает только о трафике?Что нужно сайту от Яндекса?

Трафик(попасть в топ)Деньги

(от рекламы)

Трафик(контекст)

Трафик(другие сервисы)

Веб-аналитика

Безопасностьсайта

Технологии для сайта(API карт, Фоток, ПДС и т.п.)

— Нужно, чтобы сайт индексировался без ошибок

— Нужно, отличать важное от второстепенного

— Нужно понимать, что проиндексировали

Яндексу нужны понятные качественные сайты, которые легко индексируются!

Качественно отвечать на вопросыА что нужно Яндексу?

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Как это работает?

Знакомимся

Сайт

Яндекс

Поисковый индекс

База робота

Новый сайт? Расскажите!

Какой же тут подзаголовок? :)Добавление сайта

— Добавить сайт http://webmaster.yandex.ru/site/add.xml

—А зачем тогда addurl?

— Возникли сложности?

—robots.txt

—Ошибки DNS

—Блокировка робота хостером

— Проверка ответа сервера http://webmaster.yandex.ru/server-response.xml

Сложно, но можноПодтверждение прав

С подтверждением справляются не все:70% – успешно подтвердили 13% – не смогли подтвердить17% – не пытались, добавили чужой сайтСайт www.yandex.ru добавили 4 тыс. раз. Ну вот зачем?!

Новые способы подтверждения прав:—Делегирование

—HTML-файл

—Email в записи WHOIS

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Робот мешает?

Ситуация редкая, но всё жеНагрузка со стороны робота

— Выставляем Crawl-delay

— Смотрим на порядок директивUser-agent: YandexDisallow: *.docAllow: /catalog/

http://webmaster.yandex.ru/site/robots.xml

/catalog/a.doc

Раньше был запрещён,будет разрешен!

User-agent: Yandex Disallow: /catalog/Crawl-delay: 2,5 # таймаут в 2,5 сек

Устраняем неполадки

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Уменьшился трафик

—Узнайте вовремя: Сообщения, Виджет, Яндекс.Бар

—Описание вердиктов в Я.Вебмастере

—Следите за обновлениями CMS

—Можно пожаловаться на вирусы и фишинг

Вирус?Пропал трафик

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Уменьшился трафик

РанжированиеУменьшился трафик

Конкуренция? Смотрим на тренды

Доигрались?

— Спам

— Скрытый текст

— Переоптимизированные тексты

— Взрослый контент

— И То-О-Чём-Нельзя-Говорить

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Загрузили, но не то?

Построение индексаУменьшился трафик

— Смотрим на структуру сайта

— Robots.txt: clean-param

— Насколько уникален сайт?

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Вообще не загрузили?

Индексирование?Упал трафик

—Проблемы с хостингом —Проблемы с DNS—Неверный robots.txt или файл Sitemap—Неверные ссылки

Проверяем ответ сервераИзучаем исключенные страницы

Улучшаем

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Где это можно сделать?

superpuperbook.ru

Robots.txt… индексацию

• Clean-param: только нужные страницы

• Host: указываем главное зеркало

• Sitemap: где лежит файл Sitemap?

Robots.txt… индексацию

• Clean-param: только нужные страницы • Host: указываем главное зеркало

• Sitemap: где лежит Sitemap?

User-agent: YandexDisallow:Clean-param: ref /get_book.plHost: superpuperbook.ruSitemap: superpuperbook.ru/sitemap.xml

Файлы Sitemap… индексацию

• Помогает понять роботу приоритет страниц

• Указать можно в robots.txt или в Я.Вебмастере

sitemaps.org

Файлы Sitemap… индексацию

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

<url>

<loc>http://www.superpuperbook.ru/get_book.pl/bible</loc>

<lastmod>2011-09-28</lastmod>

<changefreq>daily</changefreq>

<priority>0.8</priority>

</url>

…

И дополнительный источник трафика… ранжирование в своём регионе

• Инструмент “Регион сайта” указываем регион клиента

• Организация в Я.Справочнике (sprav.yandex.ru) указываем регион организации

И дополнительный источник трафика… ранжирование в своём регионе

Поиск по признакам… нахождение на картах

Это мои тексты!… ранжирование авторских текстов

План действий

1. Сообщаем Яндексу свой текст

2. Яндекс проверяет наличие текста в интернете

3. Публикуем текст на сайте

…

4. Авторство за текстом закреплено!

http://webmaster.yandex.ru/site/ext_plugins.xml?wizard=api.originals

И не только… представление в Поиске

• Микроформаты, schema.org, opengraph строим семантический веб вместе

• Партнёрские программы 75 рубрик адресов, недвижимость, авто, …

Дополнительные инструменты… представление в Поиске

• Регистр имени сайта

• Быстрые ссылки

ё

ё

Сайт

Яндекс

Поисковый индекс

База робота

Загрузка роботом

Построение индекса

Ранжирование

Хорошо сработано!

Подписываемся на сообщения… свою информированность :)

• Про атаки и вирусы XSS атака, вирусы на сайте, скрытый текст

• Про партнёрские программы Результаты обработки данных, сообщения от модераторов

• И многое другое…

Все инструменты в одном месте… свой бизнес

http://business.yandex.ru/

Команда веб-поиска

119021, Россия, Москва,ул. Льва Толстого, 16

+7 (495) 739-00-00+7 (495) 739-70-70 — факс

senin@yandex-team.ru

ajax@yandex-team.ru

Михаил СенинАлександр Шубин