Как удалить sitemap из яндекс вебмастер

«лишний» sitemap в яндекс.вебмастер и google search console

xpanat

12.03.2019 15:33 4 210

Всем привет! Столкнулся с загадкой, во всяком случае для меня. Имеется сайт на WP, на его копию натянули новый шаблон с сохранение url и перекрепили к копии домен. Также плагин All in One SEO Pack заменили на Yoast SEO. В результате в Яндекс.Вебмастер и Google Search Console имеются два файла sitemap — sitemap.xml от All in One SEO Pack и sitemap_index.xml от актуального Yoast SEO, который собственно и нужен. Как удалить первый из обоих вебмастеров?

Ответы на пост (4) Написать ответ
12.03.2019 15:45

Проверьте Robots.txt удалите ссылки на ненужный sitemap, удалите ненужный файл sitemap с корня сайта, если доступа к удалению файла sitemap у вас нет по каким либо причинам, то пропишите в Robots.txt три строки User-agent: * Disallow: /sitemap.xml Sitemap: https://Ваш сайт/sitemap_index.xml

12.03.2019 16:00

В корне сайта ненужного sitemap нет, в robots.txt прописан только нужны. Как вариант попробую добавить в роботс Disallow: /sitemap.xml. Спасибо!

Еще бы понять откуда он взялся. ((

12.03.2019 18:28

Отключить в настройках плагина. Не снеба «свалился», опция Сформировать satemap» — включена. Причем, наверное, в авторежиме.

В теории — вы ж сами задаете адрес «карты» в сервисах вебмастеров. Как и в host в роботс. Поисковикам — наплевать, вообще-то, но самогенеренный скрипт внутри проекта. Хоть тысячу карт наплодите, они не интересны псам.
Кто-то прописал адрес sitemap. Если не вы, то кто же? 🙂 Указывается — вручную.

Создание sitemap.xml и загрузка в Яндекс.Вебмастер и Google Search Console

Карта сайта (sitemap.xml) – содержит ссылки на страницы сайта. Карта сайта нужна для индексации страниц поисковыми роботами Яндекса и Google.

Содержание:

1. Создание карты сайта
   • Онлайн-генераторы
   • Плагины
   • Программист
2. Загрузка sitemap.xml на сайт
3. Добавление sitemap.xml в robots.txt
4. Загрузка sitemap.xml в Яндекс.Вебмастер
5. Загрузка sitemap.xml в Google Search Console

Создание карты сайта

Чтобы создать карту можно воспользоваться тремя способами.

Онлайн-генераторы

В интернете есть специальные сервисы по созданию карты сайта. Например: Mysitemapgenerator.com . Вставляете адрес сайта, для которого нужна карта, и скачиваете sitemap.xml. Файл можно редактировать, например: удалить страницы, которые не нужны для продвижения. Этот способ простой, но неудобен тем, что при создании новых страницы, нужно генерировать карту сайта заново . Также необходимо раз в 2-3 месяца обновлять карту сайта , чтобы роботы быстрее индексировали изменения.

Плагины

В некоторых CMS (системах управления сайтом) можно установить плагин, который автоматически добавляет новые страницы в карту сайта, а также периодически обновляет sitemap. Это удобно, но когда на сайте много различных плагинов, снижается скорость загрузки сайта. К тому же, только некоторые CMS поддерживают плагины .

Программист

Поставьте задачу программисту по созданию автоматической карты сайта со своими условиями. Тогда новые страницы сами попадут в карту сайта, и она будет автоматически обновляться. Этот способ потребует затрат на программиста, зато все будет автоматизировано — про sitemap.xml можно будет забыть!

Загрузка sitemap.xml на сайт

Загрузка карта сайта нужна, если вы генерируете ее самостоятельно. Да и в целом всем специалистам полезно знать, где она находится. Так что не пропускайте этот пункт , даже если карта у вас она автоматическая.

После того, как вы сгенерировали карту сайта, загрузите файл sitemap.xml в корень сайта. Сделать это можно через хостинг или FTP. Sitemap.xml находится там же, где Robots.txt и .htacces.

Теперь, если ввести в адресную строку site.ru/sitemap.xml, откроется карта сайта со страницами.

Добавление sitemap.xml в robots.txt

Файл на сайт загрузили, но роботы об этом пока не знают. Чтобы показать этот файл, пропишите ссылку в техническом файле robots.txt.

Загрузка sitemap.xml в Яндекс.Вебмастер

А теперь показываем файл роботам Яндекса. Для этого откройте Яндекс.Вебмастер – Индексирование – Файлы Sitemap – отправьте карту сайта. Возможно, Яндекс уже увидел карту сайта из robots.txt.

Загрузка sitemap.xml в Google Search Console

Не забываем и про роботов Google. Для этого откройте Google Search Console – Файлы Sitemap – отправьте карту сайта.

Итог: карта сайта нужна для поисковых роботов. Лучше всего установить автоматическую карту сайта с помощью программиста. Если карта сайта не автоматическая, то не забывайте обновлять ее раз в 2-3 месяца. Заново добавлять карту сайта в Яндекс.Вебмастер и Google Search Console нет необходимости – они переобходят карту сайта автоматически.

Спасибо, что дочитали до конца. Переходите к следующей инструкции.

«Яндекс.Вебмастер»: самый подробный обзор функционала

Можно считать, что «Яндекс.Вебмастер» — сервис для владельцев сайтов, но на самом деле это больше, чем просто сервис. Это промежуточное звено, посредством которого поисковая машина общается с человеком. Данные, которые представляет «Яндекс.Вебмастер», невозможно подвергнуть сомнению. С другими, «рукотворными» сервисами не так — прежде чем им поверить, придётся разобраться, на каких алгоритмах они работают.

Ценность «Яндекс.Вебмастера» заключается и в том, что это абсолютно бесплатный инструмент. Если научиться использовать его потенциал «на полную», можно избавиться от необходимости платить за другие сервисы и существенно сократить сумму расходов на SEO-продвижение. В статье мы расскажем, как настроить «Вебмастер» «Яндекс» правильно и какие возможности он даёт.

Для чего используется «Яндекс.Вебмастер»

Когда SEO-специалист видит, что сайт «захандрил» — а главным признаком того является падение трафика — то первым делом отправляется в «Яндекс.Вебмастер». Благодаря «Яндекс.Вебмастер» проверить сайт удастся по множеству критериев:

• корректно ли отображается на мобильных устройствах;
• какие странички вылетели из индекса, изменилось ли их количество;
• изменилось ли количество внутренних и внешних ссылок;
• в порядке ли SSL-сертификат, а также файлы robots.txt, sitemap.xml;
• поменялось ли значение ИКС — индекса качества сайта;
• изменились ли позиции важных ключевых фраз.

Также благодаря сервису «Яндекс» вебмастер может проинформировать поискового бота, что на сайте появилась новая полезная страница, удалить ненужные страницы из индекса, настроить микроразметку с целью получить привлекательные и кликабельные сниппеты.

Как добавить новый сайт в «Яндекс.Вебмастер»: пошаговая инструкция

Процедура привязки сайта к «Вебмастеру» не такая сложная, но если вы делаете это впервые, могут возникнуть затруднения. Поэтому мы объясним, как добавить сайт в «Яндекс.Вебмастер» и как пользоваться им, буквально «на пальцах» и с иллюстрациями.

Прежде всего зайдите на https://webmaster.yandex.ru/ , используя учетные данные вашей «Яндекс.Почты». Затем нажмите кнопку «+» в верхней панели сервиса.

Введите в пустое поле адрес ресурса и нажмите «Добавить».

На следующем этапе подтвердите права на сайт. Сделать это можно при наличии доступа в админку ресурса или к хостингу. «Яндекс.Вебмастер» позволяет выполнить подтверждение одним из 3 способов:

• Добавить специальный метатег в раздел «head» главной страницы (1).
• Создать HTML-файл и добавить в корень сайта (2).
• Внести TXT-запись в DNS домена (3).

Первый способ проще прочих, но к нему прибегать не рекомендуется. За счёт дополнительной записи вы увеличиваете вес хедера, из-за чего страница загружается дольше — пусть и ненамного. Советуем выбирать способ с добавлением HTML-файла.

Подтвердили права? Теперь нажмите «Проверить». Проверка займёт несколько секунд, потом сервис вынесет вердикт: удалось вам связать ресурс с «Яндекс.Вебмастером» или нет.

Поисковой робот «Яндекс» индексирует ресурс спустя примерно 7 дней с момента его регистрации в «Яндекс.Вебмастере».

После привязки сайта к «Вебмастеру» вы можете сделать ещё одну полезную вещь — объединить сервис с «Яндекс.Метрикой» (конечно, если ею пользуетесь). Зайдите в настройки «Метрики» и нажмите кнопку «Отправить запрос ещё раз» напротив надписи «Не подтвержден в Вебмастере».

Удаление сайта из «Яндекс.Вебмастер»

Вопроса, как удалить сайт из «Яндекс.Вебмастер», у вас, вероятно, не возникнет. Ведь для этого достаточно нажать «крестик» напротив адреса сайта в общем перечне.

Однако удаление сайта из «Вебмастера» не приводит к удалению сайта из интернета вообще. Страницы продолжат индексироваться. Также важно понимать, что сайт удалится только у того пользователя, который его удалил — а не у всех, кто имеет права на управление.

Предварительная настройка «Яндекс.Вебмастер»

Представим, что вы успешно зарегистрировались в чудо-сервисе «Яндекс.Вебмастер» — что дальше? Предлагаем начать с основ и выполнить следующее:

• Проверить файл robots.txt. Путь: «Инструменты» — «Анализ robots.txt» — нажать кнопку «Проверить». Файл robots.txt в основном нужен, чтобы закрыть от индексации страницы, которые роботу не нужны — и тем самым избавить его от лишней работы.
• Добавить ссылку на sitemap. Путь: «Индексирование» — «Файлы Sitemap» — внести в окошко ссылку на карту сайта и кликнуть на «Добавить». Если вас терзает то, что пользователи «Яндекс» обходят ваш сайт вниманием несмотря на его солидный возраст, возможно, это простое действие позволит решить проблему.
• Задать региональность — указать поисковику, в каком городе вы предоставляете услуги. Путь: «Информация о сайте» — «Региональность». Напротив пункта «Вебмастер» стоит шестерёнка — нажмите на неё.

Теперь пропишите в появившемся поле название региона. Ниже укажите ссылку на страницу, которая содержит данные о региональной принадлежности — например, на страницу «Контакты». Наконец, нажмите кнопку «Сохранить».

При отсутствии на сайте страницы с информацией о региональной принадлежности ресурса задать региональность в «Яндекс.Вебмастере» не получится. Заявку можно подать, но её отклонят.

Какой регион выбрать? Если продвигаете интернет-магазин, выбирайте регион, в котором находится ваша компания. Если у вас блог или «новостник», подойдёт вариант «Россия».

Обзор разделов «Яндекс.Вебмастера»

Описанные нами процедуры предварительной настройки «Яндекс.Вебмастер» важны, но использовать сервис исключительно ради них — всё равно, что стрелять из танка по муравьям. «Вебмастер» — настоящий «мультитул», и мы попробуем познакомить вас с максимальным количеством его функций через подробный обзор разделов.

Сводка

Уже по названию «Сводка» понятно, что это раздел, в котором скомпилирована основная информация о сайте:

• Обновления поиска.
• Проблемы сайта.
• Индекс скорости сайта.
• Динамика показателя ИКС.
• Данные из «Яндекс.Справочника».
• Последние внешние ссылки.

Сюда же под видом важных сведений «Яндекс» подтягивает актуальные публикации из собственного блога и свои новые фичи. Например, на момент написания этой статьи сервис предлагает загрузить фид для улучшения сниппетов интернет-магазинов.

Диагностика

В этом разделе приводится информация о проблемах, имеющихся на сайте. Сам сервис классифицирует проблемы по степени серьёзности на:

• Фатальные — вероятно, сайт «лёг» и его необходимо реанимировать. Пример фатальной ошибки — наличие проблем с безопасностью.
• Критичные — влияют на ранжирование. Пример критичной ошибки — «отвалился» SSL-сертификат.
• Возможные — могут влиять на ранжирование. Пример возможной ошибки — отсутствие тегов Title и Description у страниц.
• Рекомендации. «Яндекс.Вебмастер» может порекомендовать изменить формат фавиконки или зарегистрироваться в «Яндекс.Справочнике». Следовать рекомендациям не обязательно.

Недавно появились ещё «Проблемы Турбо-страниц» и «Проблемы Турбо-магазина», но это может волновать только тех, кто Турбо-страницами пользуется.

Поисковые запросы

В разделе «Поисковые запросы» может «подзалипнуть» тот, кто отвечает за оптимизацию SEO-текстов. Например, информация в подразделе «Статистика запросов» позволяет понять, по каким запросам больше всего показов / кликов, а по каким — наиболее высокий CTR. Все эти данные можно упорядочить и выгрузить в форматах CSV и XLS.

Из примера выше легко сделать вывод, что веб-мастеру стоит поработать над привлекательностью сниппетов, поскольку CTR — просто катастрофа.

Также статистику в разрезе «Показов», «Кликов» и CTR можно выгрузить по страницам — в подразделе «Статистика страниц».

Однако наиболее ценная информация, на наш взгляд, представлена в подразделе «Рекомендованные запросы». Здесь перечислены запросы, по которым есть резервы. То есть релевантная страница по ним имеет низкие позиции, но если бы она сумела подняться, это дало бы существенный прирост трафика.

Запросы можно упорядочить по прогнозной цене клика в рублях. Из рисунка выше мы, например, видим, что рекомендуемый поисковой системой запрос «как продать рекламу в инстаграмме» является очень «сочным».

Индексирование

Этот раздел сервиса кажется самым важным, ведь прежде всего, чтобы отрегулировать индексацию сайта, вебмастер осваивает программу. Подразделов, как и возможностей, здесь очень много — мы остановимся на ключевых:

• Переобход страниц. Добавив адрес страницы на переобход в «Яндекс.Вебмастер», СЕО-шник даст поисковой системе понять, что на этой странице что-то изменилось и что её нужно переиндексировать вперёд остальных.
• Проверить статус URL. В этот подраздел можно добавить адреса важных страниц сайта, чтобы немедленно узнавать о выпадении их из индекса. Статус «Проверено», как рисунке ниже — признак того, что все в порядке. Если в инструменте «Яндекс.Вебмастера» «Проверить статус URL» «обрабатывается» стоит — паниковать не надо. Это значит, что проверка происходит прямо сейчас.

• Страницы в поиске. Подраздел полезен главным образом тем, что позволяет быстро получить список страниц, которые выпали из поиска — через пункт «Исключенные страницы».
• Переезд сайта. Здесь происходит настройка главного зеркала в «Яндекс.Вебмастер».

Представление в поиске

В большей степени рекламная витрина «Яндекса». Этот раздел, который позволяет сделать вывод, достаточное ли количество инструментов поисковой системы пользователь задействовал, чтобы сделать привлекательным сниппет и попасть в «специальные ответы» (читай — в нулевую позицию). Мерой здесь выступает статус подключения — шкала справа вверху.

Ссылки

В этом разделе 2 подраздела: «Внутренние ссылки» и «Внешние ссылки». В подразделе «Внутренние ссылки» отображается список нерабочих внутренних ссылок. Если их так много, как на рисунке ниже — это повод срочно приступить к проработке перелинковки.

В подразделе «Внешние ссылки» вы можете узнать, какие сайты ссылаются на ваш и через какие анкоры. Перечень сайтов-доноров выгружается в формате TSV.

Информация о сайте

Топом с точки зрения популярности из раздела «Информация о сайте» был инструмент «Оригинальные тексты». Однако его, как и инструмент «Товары и цены», «Яндекс» отключила.

Зато в разделе «Информация о сайте» «Яндекс.Вебмастера» региональность сайта задать по-прежнему можно. Причём не только для самого «Вебмастера», но и для «Яндекс.Справочника».

Турбо-страницы

Турбо-страницы — это версии страниц ресурса, облегченные ПС с целью увеличения скорости загрузки. Турбо-страницы на «мобильниках» загружаются втрое быстрее обычных.

Веб-мастера приняли эту новацию со стороны Yandex в штыки — хотя бы потому, что турбо-страницы изначально выглядели слишком куце. Со временем «Яндекс» проработал все возражения веб-мастеров, сделав турбо-страницы действительно толковым инструментом, без слабых мест. В частности, персонифицировать страницы стало возможно за счет добавления шапки и логотипа сайта.

В новейшей версии «Яндекс.Вебмастера» под турбо-страницы выделили сразу 2 раздела: первый — для контентных сайтов (блогов), второй — для интернет-магазинов.

Инструменты

Раздел «Инструменты» включает в себя набор важных для СЕО-шника сервисов. Эти сервисы позволяют:

• Выявить ошибки в файлах robots.txt и sitemap.xml.
• Проверить ответ сервера.
• Удалить страницы сайта из поиска. За день — максимум 500 штук.
• Проанализировать микроразметку и мобильную версию сайта.

Все инструменты здесь предельно просты. Работа веб-мастера сводится в основном к тому, чтобы вставить ссылку в пустое окошко и ознакомиться с результатом, который сервис выдаст через 2-3 секунды.

Настройки

В этот раздел вы, возможно, зайдёте один раз, максимум два. Скорее всего — для настройки уведомлений. По умолчанию настройки выставлены так, чтобы PUSH-уведомления возникали только при появлении критичных или фатальных проблем.

Через настройки вы также можете привязаться к «Яндекс.Метрике» и получить код для добавления иконки «Яндекс ИКС» на сайт.

Полезные сервисы

Заключительный раздел — подборка прочих сервисов, разработанных компанией «Яндекс». Здесь встретишь популярные «Метрику» и «Яндекс.Справочник», а также более экзотические варианты — например, «Яндекс.Формы», программу для создания интерактивных форм.

Итоги

Разбираясь, для чего нужен «Яндекс.Вебмастер», приходишь к интересному выводу: программа — не только про продвижение в «Яндексе». «Вебмастер» содержит много полезных сервисов, которые анализируют сайт безотносительно к поисковой системе. В частности, инструменты «Валидатор микроразметки» и «Проверка мобильных страниц» можно считать универсальными — данные, которые они дают, помогают сделать сайт лучше для обоих поисковиков.

«Вебмастер» (как и «Метрика») постоянно дополняется новыми разделами и инструментами. Поэтому, регулярно заглядывая в «Вебмастер», будешь в курсе всех новаций «Яндекс». Это гораздо удобнее, чем собирать крохи информации по SEO-форумам.

Что такое sitemap и как её создать

Разбираемся, что такое XML-карта сайта, зачем она нужна и как сделать sitemap.

Относительно необходимости использования sitemap спорят разработчики и SEO‑специалисты. Одни говорят: она не нужна; это рекомендация, которая не гарантирует индексацию страниц Google и Яндексом, поэтому с ней не нужно возиться. Другие считают инструмент полезным, поработав с ним и увидев плюсы.

Рассмотрим, может ли SEO‑специалист обойтись без sitemap, и если нет — как её создать.

Что такое sitemap и зачем она нужна

Sitemap — это файл, который направляет поисковые системы к страницам сайта.

По нему можно увидеть, как организован контент: список и ссылочная иерархия, альтернативные вкладки, тип контента (видео, изображения и новости), а также данные о частоте обновлений.

Как sitemap влияет на SEO

Sitemap применяется для того, чтобы поисковики быстрее замечали страницы и ранжировали их по запросам пользователей. Без заданной навигации роботы долго индексируют даже 300‑500‑страничные сайты — примерно 3–4 недели.

Карта сайта передает краулерам информацию о структуре, контенте и обновлениях, тем самым помогая ПС понять, какую страницу нужно проиндексировать, а какую — проигнорировать. Это в том числе позволяет экономить краулинговый бюджет сайта.

Когда карта сайта необходима

Sitemap — это не обязательный, а вспомогательный атрибут поисковой оптимизации. Например, вам точно не стоит тратить время на файл sitemap для сайта‑визитки на 10 страниц.

Однако бывают ситуации, когда без sitemap не обойтись:

• если ресурс многостраничный (больше 500 страниц, которые нужно проиндексировать) и/или имеет сложную структуру;
• если проект новый, и у него мало внешних ссылок;
• если вы часто вносите изменения на сайт.

В остальных случаях для индексации содержимого роботами Google достаточно применить корректные ссылки на необходимые страницы и связать их с важными разделами.

По алгоритмам Яндекса площадка также может обойтись без файла sitemap, если не имеет глубокой вложенности; большого количества страниц, которые нужно индексировать; и если страницы имеют навигационные ссылки.

Виды sitemap

XML

Универсальный формат навигации для поисковиков. Содержит список ссылок, данные об их последнем обновлении и приоритете индексирования. Как правило, XML‑карты скрыты от пользователей и видны только ПС.

Протокол XML состоит из тегов заданной разметки и использует кодировку UTF‑8. Такая кодировка позволяет компактно передавать и хранить символы, а ещё приспособлена для текстов на латинице.

В начале sitemap ставят открывающий тег , в конце закрывающий — . Область имен ограничивается . Для каждого адреса необходимо использовать в качестве родительского; дочерним для родительского будет тег . Не обязательно применять все имеющиеся метки.