Ваше благополучие зависит от ваших собственных решений.

Джон Дэвисон Рокфеллер

Меню сайта
  • Компьютеры
  • Телефоны
  • Бизнес
  • Свое дело
  • Решение проблем
  • Интернет
  • Новости
  • Новости
    Реклама
    Реклама

    Уход за роботом Google: 5 шагов к неотразимой карте сайта XML

    У вас может быть лучший сайт в мире, но вы не будете иметь хорошего рейтинга, если ваш сайт трудно сканировать и перемещаться роботом

    У вас может быть лучший сайт в мире, но вы не будете иметь хорошего рейтинга, если ваш сайт трудно сканировать и перемещаться роботом.

    Все сайты должны иметь карту сайта в формате XML, включая страницы их сайта в качестве стандарта. Это то, что поисковые системы используют как часть своего сканирования и последующей индексации.

    Всегда полезно сделать эти файлы как можно более простыми для чтения поисковым роботом, поскольку это может ускорить индексацию вашего сайта.

    В этом посте я покажу пять лучших рекомендаций по настройке и отправке ваших карт сайта. Не все будут применяться ко всем сайтам, но в целом, если вы примените их на практике, тогда ваши карты сайта будут намного легче читать и управлять, а ваш сайт будет легче индексировать.

    1. Разделить на разделы / категории

    Существует стандартное ограничение на размер карты сайта в 10 МБ или 50 000 URL-адресов, и хотя робот поисковой системы будет считывать карту сайта до этого размера, это может занять слишком много времени и поставить под угрозу время сканирования.

    Что делать:

    Для более крупных сайтов или сайтов с четкой структурой вы можете создать несколько разных карт сайта, чтобы разделить страницы для обхода. Например, вы можете создать общую карту сайта для всех ваших страниц верхнего уровня и отдельную карту сайта (или карты сайта) для страниц вашей категории. В качестве альтернативы вы можете создавать разные карты сайта в зависимости от того, как часто они меняются, чтобы устанавливать разные приоритеты сканирования на разных страницах.

    Как это помогает?

    Разделение ваших карт сайта облегчает их поисковым роботам. Это также позволяет вам с большей легкостью определить, какие страницы еще не проиндексированы поисковой системой в Инструментах для веб-мастеров. Это позволяет вам намного легче управлять изменениями на вашем сайте. Вам также не нужно создавать новую карту сайта для всего сайта, если что-то меняется на вашем сайте.

    2. Покажите ссылки на все ваши карты сайта в файле robots.txt.

    Это довольно простая вещь, но удивительно, как часто это делается неправильно. Файл robots.txt представляет собой небольшой текстовый файл, который, по сути, сообщает роботу поисковой системы, что ему следует и не следует сканировать. Вы можете запретить целые каталоги или страницы на вашем сайте, а также управлять другими параметрами, относящимися к сканированию сайта. Всегда лучше указывать местоположение вашей карты сайта в файле robots.txt, поскольку обычно это второе место, куда робот попадает при сканировании вашего сайта.

    Что делать:

    Если у вас есть несколько файлов Sitemap, вы можете перечислить их и здесь в следующем формате:

    Пользователь-агент: *

    Разрешать: /

    Disallow: / wp-admin /

    Disallow: / категория /

    Карта сайта: http://www.mysite.com/top-page-sitemap.xml

    Карта сайта: http://www.mysitee.com/category-page-sitemap.xml

    Как это помогает?

    По сути, это ваш первый указатель для поисковой системы, указывающий его в направлении, которое позволит сканировать ваш сайт по самому легкому пути.

    3. Убедитесь, что нет битых ссылок

    Многие инструменты создания карты сайта просканируют весь ваш сайт, используя его внутреннюю структуру ссылок, и создадут для вас файл sitemap.xml. Это имеет свои преимущества - это быстро и легко - но это не точно. В некоторых случаях, когда на вашем сайте есть старые страницы, которые по-прежнему связаны с внутренней ошибкой, это может привести к ошибке 404. Иногда они могут оказаться в вашей карте сайта XML, и это не очень хорошо, когда поисковая система сканирует их и попадает в тупик.

    Что делать:

    После того как вы сгенерировали свой файл сайта, вы можете запустить его через валидатор, чтобы проверить, правильно ли он читается и есть ли какие-либо ошибки, такие как ошибки, созданные по неработающим ссылкам. Я использую {W3C Validator http://validator.w3.org/ } чаще всего.

    Если вы найдете неработающие ссылки, вы должны определить их местоположение на вашем сайте и удалить их. Затем вы можете заново сгенерировать свою карту сайта. Если на многих страницах есть неработающие ссылки, вы можете решить их как можно скорее, чтобы ваш сайт не пострадал другими способами.

    Если у вас большой сайт или много страниц, которые необходимо удалить из файлов Sitemap, вы можете использовать программу для сканирования, например {Screaming Frog http://www.screamingfrog.co.uk/seo-spider/ } и откройте файл в текстовом редакторе, определите страницы и удалите их. Будьте осторожны с этим, хотя, как будто вы не редактируете файл должным образом, он может повредить его.

    Как это помогает?

    Удаляя неработающие ссылки, поисковые системы не будут попадать в тупики в вашей карте сайта, и это может ускорить сканирование. Кроме того, как в Bing, так и в Google Webmaster Tools подобные ошибки могут появляться на панели инструментов и в некоторых случаях останавливать поисковую систему, даже смотря на файл.

    4. Удалите 301 перенаправленных страниц

    Если у вас есть внутренние ссылки, которые перенаправлены на 301, имеет смысл заменить ссылки новым целевым URL на карте сайта, а не иметь внутреннюю ссылку, которая является избыточной. Это замедлит сканирование, а также замедлит навигацию по сайту!

    Когда дело доходит до создания файла карты сайта, если у вас есть внутренние ссылки, которые перенаправляют их, они могут быть использованы любым инструментом, который вы используете для его создания. Это означает, что вы можете получить карту сайта, содержащую старые перенаправленные ссылки и целевой URL-адрес назначения.

    Что делать:

    Проще говоря, просканируйте свой сайт и убедитесь, что все внутренние ссылки указывают на предполагаемый пункт назначения, а не на страницу, на которой есть перенаправление. Я бы порекомендовал использовать для этого инструмент Microsoft SEO, так как он легко подберет для вас (Вы можете узнать об инструменте и его других целях {здесь) http://www.koozai.com/blog/search-marketing/microsoft-seo-toolkit-review/ }).

    Как это помогает?

    Удаляя лишние ссылки и оставляя только ваш сайт и карту сайта со ссылками на живые страницы, это может уменьшить размер карты сайта и сократить время, которое потребуется поисковой системе, чтобы прочитать ее, оставляя драгоценные миллисекунды для сканирования вашего сайта на странице.

    5. Отправьте свою карту сайта в Google и Bing Webmaster Tools.

    После создания карты сайта важно отправить ее в Google и Bing Webmaster Tools. Таким образом, вы можете предложить им дополнительную (и более быструю) возможность сканировать карту сайта и сам сайт.

    Что делать:

    В Google Webmaster Tools вы переходите на вкладку Sitemap на главной панели инструментов, нажимаете на красный прямоугольник в правом верхнем углу с надписью «Добавить / проверить Sitemap» и добавляете URL-адрес своей карты сайта (-ов), исключая основной домен. Это тогда добавляет это в приборную панель.

    Во многом так же, как и в Google, в Bing Webmaster Tools, в то время как в информационной панели вы увидите в средней правой части экрана «Отправить файл Sitemap». Нажмите на него и добавьте URL карты сайта, чтобы отобразить его на панели инструментов.

    Как это помогает?

    Отправка на обе эти платформы Инструментов для веб-мастеров позволит вам лучше контролировать индексацию ваших сайтов, повторно отправлять карты сайта поисковым системам вручную при наличии изменений, а также позволит вам лучше понять, какие области вашего сайта сканируются чаще (если Вы разбили свои карты сайта).

    Наличие хорошо структурированной и легко доступной XML-карты сайта значительно облегчит поисковым системам поиск страниц на вашем сайте и их сканирование. Опять же - у вас может быть лучший сайт в мире, но вы не будете иметь хорошего рейтинга, если ваш сайт трудно сканировать и перемещаться роботом! Любой владелец сайта или разработчик должны сделать так, чтобы его было максимально легко и быстро сканировать.

    Я надеюсь, что этот пост был полезен, и если у вас есть какие-либо вопросы или другие комментарии, связанные с картой сайта, пожалуйста, не стесняйтесь добавлять их!

    Об авторе ~ Крис Симанс

    Крис Симанс - консультант по цифровому маркетингу. Вы можете связаться с Крисом на его сайт , а также Twitter.

    Если вам понравился этот пост, вы также можете быть заинтересованы в этом!

    Как это помогает?
    Как это помогает?
    Как это помогает?
    Как это помогает?
    Профиль
    Реклама
    Деловой календарь
    Пн Вт Ср Чт Пт Сб Вс
     
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    Реклама
       
    Sti.lg.ua © 2016