Яндекс вебмастер

Раздел «Инструменты» в Яндекс.Вебмастере

Набор полезных бесплатных инструментов для анализа вашего сайта.

Анализ robots.txt

Можно проверить, правильно ли составлен файл robots.txt. Тут отображаются строки, используемые роботами Яндекса при индексировании сайта. Также можно проверить на доступность конкретную страницу или список страниц, раздел «Разрешены ли URL»

Проверяем файл карты сайта на ошибки, прежде чем отправить ее в Яндекс.Вебмастер.

Проверка ответа сервера

Инструмент для проверки доступности сайта поисковым роботам Яндекс.

Можно менять роботов, посмотреть время ответа сервера, узнать содержимое страницы – то, как робот видит ваш сайт своими «глазами».

Страницы сайта должны быть всегда доступны и отдавать 200-й ответ. Несуществующие страницы отдают 404-й ответ и недоступны поисковым роботам.

Удаление страниц из поиска

Специальный инструмент для удаления страницы из поисковой выдачи. Можно удалить несуществующую страницу, например, товар, который больше никогда не будет продаваться на вашем сайте.

Проверка мобильных страниц

Инструмент для проверки оптимизации конкретной страницы для мобильных устройств. Сегодня все поисковые системы отдают предпочтения сайтам, оптимизированным под мобильные устройства

Важно, чтобы ваш сайт был правильно оптимизирован и корректно отображался на смартфонах, планшетах и т.д

XML-валидатор

Инструмент для проверки XML-файлов для партнерских программ Яндекса. Помогает выявить ошибки, проверить сайт под разные схемы валидации.

Валидатор микроразметки

Проверяем наличие и корректное размещение микроразметки на своем сайте. Используя семантическую разметку, вы можете улучшить представление сниппета вашего сайта в результатах поиска. Расширить описание, показать телефон, адрес, режим работы компании. Помочь роботам лучше понимать, о чем сайт. Соответственно улучшить ранжирование.

Так выглядит сайт с семантической разметкой контактов:

Чем полезен Яндекс Вебмастер

Яндекс Вебмастер – это панель управления, через которую вы сможете видеть очень много полезной информации и вместе с тем исправлять какие-то ошибки, положительно влияя на позиции своего ресурса. Этот инструмент постоянно дорабатывается.

Авторы привносят в панель вебмастеров все больше возможностей. Например, с помощью этой панели управления вы сможете видеть наиболее популярные запросы, по которым на ваш проект приходят посетители. Там же будет доступна информация по ИКС (индексу качества сайта), ошибкам, битым ссылкам и т. д.

Кстати, еще одной весомой причиной добавления своего сайта в Вебмастер является доступ к остальным приложениям и сервисам от Яндекса. Например, чтобы воспользоваться новомодными Турбо-страницами или подключить ресурс к Яндекс Дзену – вам понадобится Яндекс Вебмастер.

Как я уже сказал, этот инструмент имеет очень большое значение в плане поисковой оптимизации. Там вы сможете видеть большую часть ошибок, а значит вы легко сможете их исправить. В сервисе постоянно показываются советы, которые будут релевантны конкретно вашему ресурсу.

Подключение ресурса к Вебмастеру не создаст для вас проблем, это делается очень легко и быстро. Нужно лишь зайти в сам сервис, ввести адрес и подтвердить права. Далее мы как раз и рассмотрим добавление ресурса в этот инструмент.

Инструменты Яндекс.Вебмастер

Анализ robots.txt

Помню, когда я только начинала познавать азы сайтостроения, для меня файл robots.txt был сродни китайской грамоте! Я и сейчас самостоятельно не смогу прописать необходимые команды, но по крайней мере, теперь я понимаю, что за что здесь отвечает. У меня нет цели грузить вас лишней ненужной информацией, потому что уже готовый файл robots.txt можно скачать из Интернета — стоит только немного поискать. Если же вы установите на сайт плагин Clearfy Pro (а я рекомендую это сделать, потому что он закрывает многие пробелы движка wordpress), то он автоматически сгенерирует для вашей площадки идеальный robots.txt.

Я не активировала эту опцию, т.к. файл robots.txt для моего блога был создан задолго до приобретения этого плагина. А вот новичкам очень советую не мучиться и воспользоваться предложенным вариантом.

Основные команды, которые вы должны знать:

• User-agent: * — обращение ко всем поисковым системам,
• User-agent: Yandex — обращение к роботу Яндекс,
• User-agent: Googlebot — обращение к роботу Google,
• Allow: — разрешено для индексирования,
• Disallow: — запрещено для индексирования,
• Sitemap: https://domen.ru/sitemap_index.xml — ссылка на карту сайта Sitemap.

Инструмент Яндекс.Вебмастер Анализ robots.txt позволяет проверить ваш файл на ошибки. Для этого скопируйте код файла с вашего сайта и вставьте в пустую форму. На всякий случай напомню, как открыть robots.txt в браузере: после домена сайта допишите /robots.txt. Пример: https://domen.ru/robots.txt.

Ниже есть возможность выборочно проверить страницы сайта, доступны ли они для индексирования.

Анализ файлов Sitemap

Данный раздел позволяет проанализировать файлы Sitemap на ошибки перед тем, как загрузить их в Яндекс.Вебмастер. Вручную я ни разу не добавляла файл Sitemap на сервис, насколько я понимаю, это все происходит автоматически.

По правилам Яндекса файл с картой не должен превышать 50 Мб и содержать не более 50 000 страниц. Если карта не отвечает этим требованиям, ее можно разбить на несколько файлов.

Проверка ответа сервера

Информацию на сайте индексирует несколько поисковых роботов. Например, есть Основной робот Яндекса, есть Робот Яндекс.Картинок, Робот Яндекс.Видео, Робот Яндекс.Вебмастера.

И с помощью инструмента Проверка ответа сервера вы можете проверить доступен ли ваш сайт для обхода этими роботами. Для этого в форме необходимо указать домен и выбрать из выпадающего списка робота для анализа.

Если ошибок нет, код статуса должен быть 200 ОК.

Удаление страниц из поиска 

Если вы по каким-то своим причинам удалили страницу с сайта, было бы неплохо “рассказать” об этом сервису Яндекс.Вебмастер. Тем самым вы сможете убрать эту страницу из поиска. В пустом поле просто укажите адрес удаленный страницы сайта.

Проверка мобильных страниц

Сейчас большинство современных шаблонов для сайтов имеют адаптивный дизайн под мобильные устройства. Но все равно, если сайт новый, рекомендуется проверить, оптимизирован ли он под мобильные устройства. Для этого введите в поле адрес сайта.

XML-валидатор

Откровенно говоря, непонятная для меня функция, видимо потому, что я не работаю с партнерскими программами Яндекса. Он предназначен для проверки экспортируемых XML-файлов на валидность до передачи в Яндекс. Эта функция будет интересна и полезна для владельцев бизнесов.

Валидатор микроразметки

В современные платные шаблоны для сайтов по умолчанию уже встроена микроразметка. Если вы заказываете индивидуальный шаблон у дизайнера-верстальщика, то внедрение микроразметки должно быть обязательным условием договора. Для бесплатных шаблонов, чтобы разметить данные, можно пригласить специалиста с биржи фриланса, например. На моем блоге микроразметку как раз устанавливал такой вебмастер.

Валидатор микроразметки на Яндекс.Вебмастер позволяет проверить внедренную микроразметку на сайте.

A New Way of Highlighting Great Experiences in Google Search

We believe that providing information about the quality of a web page’s experience can be helpful to users in choosing the search result that they want to visit. On results, the snippet or image preview helps provide topical context for users to know what information a page can provide. Visual indicators on the results are another way to do the same, and we are working on one that identifies pages that have met all of the page experience criteria. We plan to test this soon and if the testing is successful, it will launch in May 2021 and we’ll share more details on the progress of this in the coming months.

Раздел «Поисковые запросы» в Яндекс.Вебмастере

Содержит информацию о поисковых фразах, по которым сайт показывается на первых 50 позициях результатов поиска Яндекса. Более подробно о данном разделе мы уже рассказывали в блоге.

Если коротко, то в этом разделе вы можете посмотреть:

Статистика запросов

Показывается полная статистика всех поисковых запросов за выбранный период. Доступна вся статистика, начиная с 1 августа 2018 года.

Работая в этом отчете, вы можете разделить запросы по группам и времени или выбрать тип устройства. Статистика по типу позволяет разделить переходы с мобильных устройств и с десктопа.

Раздел помогает отследить динамику запросов, рост позиций, CTR сниппета в поисковой выдаче.

Проанализировать количество кликов с позиций и CTR сниппета сайта:

Отслеживая эту информацию, мы можем корректировать сниппеты сайта в поисковой выдаче. Как косвенно влиять на сниппет сайта в выдаче Яндекс, мы рассказывали в этой статье.

Статистика страниц

В этом блоке показано насколько хорошо страницы сайта привлекают посетителей из результатов поиска Яндекса. Эта информация поможет оценить эффективность сниппетов страниц и сделать их более информативными при необходимости.

В блоке отображаются первые 3000 страниц сайта не ниже 50 позиции в поисковой выдаче.

Управление группами

Запросы формируются автоматически на базе ТОП-50 результатов выдачи Яндекс с показом больше одного, т.е. в данном разделе можно увидеть, по каким ключевым запросам и на какой средней позиции ваш сайт был в выдаче, сколько раз пользователи кликнули и перешли на сайт. Данные запросы можно использовать для расширения семантического ядра сайта.

Также есть возможность загрузить собственные запросы и по ним отслеживать статистику показов и кликов.

Тренды

Вкладка Тренды отражает динамику трафика вашего сайта в сравнении с конкурентами.

На графике отображается динамика относительного количества переходов на ваш сайт (зеленый график) и сайтов конкурентов (желтый график). Данные отображаются в усредненном варианте, что позволяет увидеть общую картину по динамике переходов из поисковой выдачи.

График помогает отследить, как влияют изменения на сайте на переходы из результатов поиска. К примеру, если вы заметили общее снижение трафика у вас и у похожих сайтов, скорее всего, причина тому сезонность.

Если только ваш график пошел вниз, а похожие сайты продолжают расти, что-то пошло не так и нужно искать причину.

Рекомендованные запросы

Яндекс может подсказывать, по каким еще запросам вас могут искать пользователи, что приводит дополнительный трафик. Кроме запросов, раздел отображает целевую страницу по данному ключевому слову.

Рекомендованные запросы можно использовать при ведении рекламной кампании в качестве условия таргетирования, применять для расширения СЯ сайта и в качестве идей для нового контента на сайте.

Способы подтверждения прав

Теперь мы должны подтвердить права на владение ресурсом. Для этого мы можем использовать 4 разных способа. Далее я кратко рассмотрю каждый из них, но сразу скажу, что самый удобный, по моему мнению, это вариант с HTML-файлом – загрузили его в корень и забыли. Авторизация в Вебмастере будет сохраняться долгое время.

HTML-файл (рекомендуется)

Если вы захотите подтвердить права через файл, то вам нужно будет просто скачать или создать файл с определенным содержимым. Далее этот документ должен быть размещен в корне сайта. Результатом должен быть доступ к этому файлу через: site.ру/название файла.html.

Сделать это не так сложно. Просто зайдите в файловый менеджер хостинга или войдите через FTP, после чего разместите загруженный с Вебмастера файл в корневом каталоге.

После выполнения требований нажимаем кнопку “Проверить”. И все, готово! Ресурс добавлен в Яндекс Вебмастер.

Мета-тег в head

Если вы хотите подтвердить права через мета-теги, то вы должны разместить представленный кусок в коде вашего шаблона. Как и указывают нам в сервисе, мета-тег должен оказаться в разделе head.

Если мы говорим о WordPress, то разместить мета-тег можно в файле header.php. Там как раз и хранится статичный head, который нам нужен.

Переходим во “Внешний вид” – “Редактор”. Далее находим нужный файл в боковом списке.

Размещаем код в любом удобном месте внутри раздела head. Только не вставьте его внутрь другого скрипта или тега, иначе ресурс перестанет нормально функционировать. Как только вставили тег, сохраняем изменения и переходим обратно в Вебмастер.

Другие

Также вы можете воспользоваться функционалом плагинов. Например, в Yoast SEO есть специальный раздел, воспользовавшись которым вы сможете разместить код внутри раздела head без ручного вмешательства. Перейдите в “SEO” – “Общие” – “Инструменты Вебмастеров”. Далее найдите в списке строку “Код верификации Яндекс”, куда и скопируйте данные из сервиса.

Что касается DNS-записи и WHOIS – это более сложные варианты, которые требуют работы с хостингом или разделами Яндекса. Не рекомендую выбирать их, потому как первые два варианта решают практически все проблемы с правами доступа (при условии, что вы не будете удалять файл из корня или мета-теги).

Вебмастер — это кто?

Вебмастер — это специалист широкого профиля, который занимается разработкой, сопровождением, обслуживанием сайтов и веб-приложений. Вебмастер полностью отвечает за функционирование интернет-ресурса. Чтоб оценить масштабы, стоит только представить, что порой он может выполнять работу из областей верстки, программирования, веб-дизайн, контент-менеджмента, SEO-оптимизации и администрирования сервера. 

Сам термин «вебмастер» впервые использовал Тип Бернерс-Ли в своей книге «Руководстве по стилю гипертекста в онлайне», вышедшей в 1992 году. Поэтому назвать профессию вебмастера новомодной язык не поворачивается.

Первые сайты были созданы именно вебмастерами. Постепенно проекты усложнялись, происходило разделение обязанностей, и над современными сайтами чаще работают команды профессионалов, а не человек-оркестр.

Сегодня под названием «вебмастер» все чаще подразумевают владельца сайта, который самостоятельно создал и ведет его. Развивая ресурс, он получает все большее количество трафика, который можно выгодно монетизировать: разместить обратные ссылки, добавить блоки рекламы, продать раскрученный домен, создавать материалы с нативной рекламой и т.д. 

Раздел «Индексирование» в Яндекс.Вебмастере

Самый крупный раздел в Яндекс. Вебмастере. Робот Яндекса регулярно обходит страницы сайтов и добавляет их в свою базу. Некоторые страницы могут быть недоступны для робота, закрыты от индексации, либо удалены с сайта. Данный раздел позволяет в подробностях узнать, какая страница находится в индексе, какая удалена и почему. Пробежимся по разделам.

Статистика обхода

Раздел позволяет узнать, какие страницы сайта обошел робот Яндекса. Если сайт был недоступен какое-то время, список всех недоступных страниц будет виден для анализа. Если страница недоступна продолжительное время, позиции сайта будут понижены.

Страницы в поиске

Отображает страницы сайта, которые участвуют в поиске Яндекса. Можно отследить, какая конкретно страница сейчас участвует в поисковой выдаче, какие были исключены.

Страница может быть исключена по нескольким причинам:

• дубль;
• недостаточно качественная страница;
• редирект;
• страница закрыта от индексации;
• страница удалена.

Структура сайта

Отображает разделы сайта, содержащие более 10 страниц. Показывает общее количество загруженных страниц и страниц, находящихся в поиске.

• Загруженные страницы – это страницы, которые смог найти робот и добавить в свою базу.
• Страницы в поиске – страницы, представленные в SERP Яндекс. Если страница некачественная, дублирует контент либо недоступна, она не будет отображаться в результатах выдачи.
• Доля загруженных – в процентном соотношении.
• Турбо-страниц в поиске – подключена ли турбо-страница к разделу.

Помогает обнаружить служебные разделы сайта и закрыть их от индексации в файле robots.txt.

Это скачиваемый архив, содержащий статистику по страницам, которые могли быть добавлены в Sitemap.

Проверить статус URL

Инструмент для отслеживания индексирования определенных страниц поисковым роботом. Можно проверить, знает ли Яндекс о конкретной странице. Просто скопируйте url адрес в поисковую строку. Обновление может занимать до нескольких часов, но обычно проверка мгновенна.

Мониторинг важных страниц

Яндекс предоставляет возможность отслеживать индексацию самых важных страниц сайта. Можно узнать о появлении новой страницы, участвует она или нет в поисковой выдаче и т.д.

Список важных и популярных страниц вы найдете чуть ниже, в блоке «Рекомендованные страницы».

Чтобы добавить страницы, просто скопируйте их в соответствующее поле и нажмите «отслеживать».

Переобход страниц

Помогает сообщить поисковому боту о новых и обновленных страницах. Функция полезна при обновлении текста на сайте, изменении изображений и т.д. В своей работе мы часто используем ее, если нужно вывести сайт из-под фильтров.

Обход по счетчикам

Разные источники служат основой, из которых робот Яндекса узнает о новых страницах. Как раз Яндекс.Метрика является одним из них. Этим способом можно сообщать Яндексу об обходе страниц, на которых установлен счетчик.

Для более быстрого посещения сайта роботом нужно привязать счетчик метрики к сайту, который подтвержден в Вебмастере и включить обход сайта по данным счетчика.

Отклейка зеркал

Если несколько ресурсов объединяет когда-то настроенное зеркало и некогда общий контент, а ныне только общее зеркало, то через данный раздел можно отклеить эти зеркала. После этого робот Яндекса будет считать их как независимые друг от друга ресурсы.

Скорость обхода

В данном разделе можно вручную настроить скорость обхода страниц Роботом от 0 до 2 запросов в секунду. Также можно довериться автоматической настройке Яндекса.

Заголовки и описания

Здесь система считывает title и description сайта, и если находит большое количество одинаковых заголовков или описаний, то выдает предупреждение. Дублей заголовков быть не должно.

Общие рекомендации

Помогите Google проанализировать ваш сайт

• Сделайте сайт полезным и информативным. Посетителям должно быть сразу понятно, какого рода контент представлен на нем.
• Подумайте, по каким ключевым словам пользователи будут искать ваши материалы, и включите эти термины в текст на сайте.
• Убедитесь, что элементы и атрибуты содержательны, точны и не содержат ошибок.
• Создайте продуманную и логичную иерархию страниц.
• Следуйте нашим рекомендациям по размещению изображений, видео и структурированных данных.
• Если используется система управления контентом (например, Wix или WordPress), убедитесь, что поисковые системы могут сканировать создаваемые ею страницы и ссылки.
• Чтобы робот Googlebot правильно распознавал содержание страниц, откройте ему доступ ко всем объектам сайта, от которых оно зависит, например файлам CSS и JavaScript. Наша система индексирования обрабатывает страницу со всеми ее элементами: изображениями, файлами CSS и JavaScript. Инструмент проверки URL позволит вам выявить объекты, которые недоступны роботу Google. Также вы можете воспользоваться инструментом проверки директив в файле robots.txt.
• Разрешите поисковым роботам сканировать ваш сайт без идентификаторов сеансов и без параметров URL, которые позволяют отслеживать пути их передвижения по сайту. Эти инструменты полезны, если вам нужно анализировать поведение посетителей, но Google обрабатывает страницы совершенно иначе. В результате сайт может быть проиндексирован неполно, поскольку роботам не всегда удается исключить URL, которые выглядят по-разному, но при этом ведут на одну и ту же страницу.
• Сделайте самые интересные и полезные материалы на сайте видимыми по умолчанию. Для наших роботов не составляет проблем обработать контент HTML в навигационных элементах, например вкладках или раскрывающихся разделах, однако Google может прийти к выводу, что посетителям затруднительно найти такое содержание. Поэтому мы рекомендуем размещать важную информацию на странице по умолчанию.
• Примите необходимые меры, чтобы реклама не влияла на рейтинг вашего сайта в поисковых системах. Используйте файл robots.txt или атрибуты и , чтобы запретить поисковым роботам переходить по рекламным ссылкам.

Сделайте сайт удобным для пользователей

• Имена и названия, а также другая важная информация и ссылки по возможности должны быть представлены текстом, а не изображениями. Если какой-то контент необходимо представить в графическом виде, добавьте к нему небольшое описание с помощью атрибута .
• Убедитесь, что все ссылки ведут на доступные страницы. Это можно сделать с помощью специального инструмента проверки.
• Оптимизируйте скорость загрузки. Быстро работающие сайты не раздражают пользователей и повышают удобство работы в Интернете. Это особенно актуально для посетителей с медленным подключением. Проверить скорость загрузки страниц можно с помощью инструментов PageSpeed Insights и WebPagetest.
• По возможности оптимизируйте сайт для устройств любого типа, будь то компьютеры, планшеты или смартфоны. Проверка оптимизации для мобильных устройств поможет узнать, правильно ли показываются страницы на маленьких экранах и что нужно изменить.
• Убедитесь, что ваш сайт корректно отображается в любых браузерах.
• Защитите свой сайт с помощью HTTPS. Так вы обеспечите безопасность при передаче данных между пользователем и вашими ресурсами.
• Убедитесь, что ваши страницы могут просматривать люди с нарушениями зрения, например с помощью программ для чтения с экрана.

Как Добавить TXT запись в DNS

Нажмите на вкладку DNS-запись и скопируйте уникальное значение, предоставленное вам. Вам необходимо скопировать весь код, включая текст подтверждения.

Добавление TXT записи в DNS на примере REG.RU

После авторизации, в личном кабинете – перейдите в раздел ваших услуг.

Далее, переходим в раздел доменов, в списке  выбираем необходимый домен, затем переходим в DNS-серверы домена.

Если при регистрации домена, вы выбрали для него DNS-серверы ns1.reg.ru и ns2.reg.ru, то у вас будет возможность добавить TXT запись в этом пункте. На этой странице нажмите «Добавить запись», и выберите тип записи TXT. Добавьте скопированную запись и нажмите «Готово».

Готово! После добавления TXT записи, необходимо будет перейти в Яндекс Вебмастер и пройти проверку (об этом смотрите ниже).

Как добавить TXT запись в DNS через ISPmanager

Если вы используете хостинг на reg, и для домена указаны DNS-серверы ns1.hosting.reg.ru и ns2.hosting.reg.ru, то необходимо перейти в панель управления хостингом и там прописать TXT запись. Я покажу вам на примере панели управления ISPmanager.

В ISPmanager, на главной переходим в раздел «Доменные имена», выбираем необходимый домен из списка и жмем «Записи».

В открывшейся странице нажимаем «Создать», после чего – вводим домен вашего сайта, выбираем тип записи TXT, и в последней строчке вставляем текст записи.

После того, как мы добавили TXT запись, необходимо будет вернуться в Яндекс Вебмастер и пройти проверку (об этом смотрите ниже).

Раздел Информация о сайте

Региональность

Важный раздел, позволяющий понять, какие регионы были заданы в Яндекс.Справочнике или же задать собственный регион при помощи Яндекс.Вебмастере.

Для этого потребуется ввести нужный регион и ссылку на
страницу, подтверждающую работу принадлежность к данному региону.

В случае с информационными сайтами, работающими во всех
странах/регионах/городах, можно не использовать данный раздел.

Оригинальные тексты

В данном разделе можно дать Яндексу понять, кто является автором и первоисточником текста, отправив в него текст со страниц.

Регистр имени сайта

Позволяет изменить написание сайта в поисковой выдаче Яндекса, например, сделав часть букв заглавными, тем самым выделив составные части.

Товары и цены

Для использования раздела потребуется создать фид данных в формате YML (Яндекс.Маркет) и передать данные о магазине.

Раздел можно не использовать если сайт подключен в Яндекс.Маркете, так как данные можно будет взять оттуда.

Быстрые ссылки

Позволяют увидеть, какие быстрые ссылки показываются в поисковой выдаче, а при необходимости скрыть ненужные или же изменить их вид, например, используя вместо анкора URL.

Популярные статьи

• 25.9K
• 20 мин.

Законы РФ для владельцев сайтов: штрафовать, нельзя помиловать

Российское законодательство предъявляет свои требования к сайтам, о которых большинство владельцев даже не подозревают. Но как говорится, незнание законов не освобождает от ответственности. Поэтому подробно разберем основные законы РФ, касающиеся сайтов; ответственность за нарушение этих законов, а также способы защиты от блокировки бизнеса и уплаты штрафов. К прочтению всем владельцам сайтов обязательно!

• 16 апреля 2018
• Продвижение

• 4.5K
• 10 мин.

Полный гид по оптимизации мобильного сайта

Провели оптимизацию своего сайта и вздохнули свободно? А про мобильную версию не забыли? Да-да, ее тоже нужно оптимизировать, чтобы не терять трафик из мобильного поиска и не трепать нервы посетителей с мобильных. Подробный чек-лист по оптимизации – в статье.

• 25 мая 2020
• Продвижение

• 30.9K
• 10 мин.

Что лучше: SEO-продвижение или контекстная реклама?

Не знаете, что лучше: SEO-продвижение или контекстная реклама? Все зависит от желаемого результата и ваших целей. Давайте разбираться, чтобы не потратить лишних денег и сделать правильные инвестиции.

• 22 сентября 2018
• Продвижение