- From:
- Registered: 2014.07.07
- Posts: 3,648
- I just like PunBB:
- 5 years, 3 months, 5 days,
- Likes: 425
Что делать, если на почту пришло письмо:
Маскировка и/или скрытая переадресация
Мы обнаружили, что страницы на Вашем сайте, которые видят посетители, отличаются от тех, которые предоставляются роботу Google. Например, пользователи определенных браузеров, устройств или с IP-адресами в заданном диапазоне могут перенаправляться на другие страницы. Поскольку маскировка и скрытая переадресация являются нарушением рекомендаций Google для веб-мастеров, мы вручную приняли меры в отношении (вашего сайта) для защиты от спама. К Вашему сайту или его разделам также могут быть применены и другие меры.
С помощью функции Просмотреть как Googlebot в Инструментах для веб-мастеров проверьте, предоставляется ли роботу Google тот же контент, что и пользователям.
Измените или удалите страницы, на которых используется маскировка или с которых осуществляется скрытая переадресация пользователей определенных браузеров, устройств или с IP-адресами в заданном диапазоне.
Ознакомьтесь со списком мер, действующих в отношении Вашего сайта, на странице Меры, принятые вручную. Если список пуст, запрос на повторную проверку отправлять не нужно.
Когда сайт будет приведен в соответствие с рекомендациями Google для веб-мастеров, отправьте запрос на его повторную проверку. Если Ваш сайт будет соответствовать нашим рекомендациям, принятые вручную меры будут отменены.
Если Ваш сайт будет соответствовать нашим рекомендациям, принятые вручную меры будут отменены.
Вопросы о способах устранения этой проблемы можно задать на справочном форуме для веб-мастеров.
- From: Moscow, Sovkhoznay 3, apt. 98
- Registered: 2014.07.07
- Posts: 3,648
- I just like PunBB:
- 5 years, 3 months, 5 days,
- Likes: 425
Под маскировкой подразумевается предоставление неодинакового контента или разных URL пользователям и поисковым системам. Использование маскировки является нарушением рекомендаций Google для веб-мастеров, поскольку пользователям предоставляются не те результаты, которые ожидались.
Ниже приведены некоторые примеры маскировки.
Предоставление поисковым системам страницы с HTML-текстом, а пользователям – страницы с картинками или Flash
Добавление на страницу текста или ключевых слов только в ответ на запрос этой страницы агентом пользователя, связанным с поисковой системой
Если на вашем сайте имеется содержание, при доступе к которому у поисковых систем могут возникнуть проблемы (JavaScript, изображения, Flash и т. п.), ознакомьтесь с нашими рекомендациями о том, как обеспечить возможность доступа поисковых систем к этому содержанию без использования маскировки.
Зачастую на сайты, подвергшиеся взлому, хакер добавляет содержание с помощью маскировки, чтобы веб-мастеру было сложнее обнаружить взлом
3 Reply by PunBB- From: Moscow, Sovkhoznay 3, apt. 98
- Registered: 2014.07.07
- Posts: 3,648
- I just like PunBB:
- 5 years, 3 months, 5 days,
- Likes: 425
Скрытая переадресация
Переадресацией называется перенаправление пользователя на другой URL вместо запрошенного. Часто этот метод используется обоснованно, к примеру, при переносе сайта на новый домен или объединении нескольких страниц в одну.
Однако в некоторых случаях переадресация применяется для обмана поисковой системы или для показа посетителям страниц отличных от тех, которые анализирует сканер. Это нарушение наших правил. В такой ситуации поисковый робот, скорее всего, не будет перенаправлен и проиндексирует содержание исходной страницы, в то время как пользователи увидят страницу переадресации. Как и при маскировке, такие действия являются мошенническими, поскольку людям и роботу Googlebot предоставляется разное содержание, и посетители могут быть перенаправлены не на ту страницу, на которую они хотели попасть.
Ниже приведены некоторые примеры скрытой переадресации:
Поисковый сканер анализирует одну страницу, а пользователям показывается совершенно другая.
Пользователи компьютеров видят обычную страницу, в то время как пользователи смартфонов перенаправляются хакерами на совершенно другой домен.
Веб-мастер может использовать JavaScript для переадресации посетителей, не желая обмануть их. Например, если вам нужно направить посетителя на внутреннюю страницу сайта после того, как он выполнит вход, применение JavaScript будет уместно. При проверке переадресации с помощью JavaScript или других методов на своем сайте на предмет соответствия требованиям нашего руководства подумайте, как могут быть истолкованы ваши цели. Не забывайте, что при переносе сайта на другой домен лучше всего задействовать переадресацию 301. Если же у вас нет доступа к серверу, на котором размещен сайт, можно использовать JavaScript.
- From: Moscow, Sovkhoznay 3, apt. 98
- Registered: 2014.07.07
- Posts: 3,648
- I just like PunBB:
- 5 years, 3 months, 5 days,
- Likes: 425
Запросы на повторную проверку
Что такое запрос на повторную проверку?
Эта процедура выполняется, если вы устранили все выявленные нарушения правил на своем сайте и хотите сообщить об этом в Google. Подробности вы найдете здесь.
Как отправить запрос на повторную проверку
Выполните следующие действия:
Войдите в свой аккаунт Search Console.
Проверьте все версии своего сайта.
В разделе "Меры, принятые вручную" прочитайте, какие действия предприняли специалисты Google в отношении вашего сайта.
Устраните все выявленные проблемы.
Перейдите в раздел "Проблемы безопасности" и узнайте, все ли в порядке с вашим сайтом.
Нажмите "Запросить проверку".
- From: Moscow, Sovkhoznay 3, apt. 98
- Registered: 2014.07.07
- Posts: 3,648
- I just like PunBB:
- 5 years, 3 months, 5 days,
- Likes: 425
Как происходит повторная проверка
Повторная проверка начинается с момента получения вами уведомления о мерах, принятых вручную, и завершается после того, как специалисты Google выяснят, удалось ли вам устранить все нарушения. Вот как выполняется эта процедура:
Вам придет оповещение о мерах, принятых вручную. Вы должны будете устранить все выявленные проблемы.
Оформите запрос на повторную проверку. О том, как это сделать, читайте ниже.
Устраните другие возможные проблемы. Подробнее читайте в разделе о типичных ошибках.
Отправьте нам запрос на повторную проверку из своего аккаунта Search Console.
Вам придет подтверждение от Google. Обратите внимание, что обработка запроса может занять несколько дней.
Google одобрит или отклонит ваш запрос.
Если проверка пройдет успешно, мы отменим меры, принятые вручную в отношении вашего сайта.
Если вы получите отказ, изучите раздел о типичных ошибках, прежде чем подавать очередной запрос на проверку.
6 Reply by PunBB- From: Moscow, Sovkhoznay 3, apt. 98
- Registered: 2014.07.07
- Posts: 3,648
- I just like PunBB:
- 5 years, 3 months, 5 days,
- Likes: 425
Как оформить запрос на повторную проверку
Запросы обрабатываются вручную специалистами Google. Чтобы нам было проще понять, какие меры вы приняли, расскажите о них как можно более подробно.
В нем точно описаны проблемы, выявленные на вашем сайте.
В нем подробно описываются действия, предпринятые для устранения проблем.
В нем приведены все результаты ваших действий.
Вы также можете предоставить нам материалы, в которых описываются ваши действия по устранению проблем на сайте. О том, как собрать и отправить такую информацию, читайте ниже.
Обратные ссылки. Составьте их список, удалите, а потом отклоните их. Мы также рекомендуем задокументировать процедуру удаления. Если вы отклоните обратные ссылки, но не станете их удалять, вам не удастся пройти повторную проверку.
Продажа ссылок на вашем сайте. Приведите примеры страниц, на которых вы удалили такие ссылки или заблокировали их с помощью атрибута . Убедитесь, что вы проделали это в отношении всех недопустимых ссылок, а не только указанных в нашем сообщении.
Типичные ошибки при отправке запроса на повторную проверку
Ниже перечислены наиболее распространенные ошибки, допускаемые веб-мастерами при отправке сайта на повторную проверку. Рекомендуем внимательно изучить этот раздел.
1. Отклонение всех обратных ссылок
Часто инструмент отклонения обратных ссылок используется неправильно. Необходимо помнить о следующем:
Обратные ссылки рекомендуется по возможности удалять. Добавление всех обратных ссылок в файл отклонения не считается решением проблемы, и вам не удастся пройти проверку.
Если в домене несколько таких ссылок, используйте строку вида domain:example.com.
Убедитесь, что не заблокировали обычные ссылки.
2. При удалении взломанного контента не использовалась функция "Просмотреть как Googlebot"
Часто нежелательный контент добавляется на взломанные сайты с помощью маскировки. Это означает, что пользователи и поисковый робот видят на веб-странице разные материалы.
Одним из способов выявления маскировки является функция Просмотреть как Googlebot в Search Console. Она позволяет узнать, как поисковый робот воспринимает ваш сайт. Часто нам приходится отклонять запросы на повторную проверку из-за того, что проблема не была устранена и при сканировании страницы обнаруживается внедренный контент. Узнайте больше о маскировке и скрытой переадресации.
3. Отправка запроса на повторную проверку пустого сайта
Мы рассмотрим запрос только в том случае, если на сайте есть полезная информация. Поэтому повторной проверке не подлежат:
Пустые сайты
, на которых много веб-страниц, но мало или вообще нет контента.
Припаркованные домены – страницы-заполнители для доменов без контента.
Сайты, недоступные в связи с ошибкой "Не найдено" (404) или сбоями сервера. Подробнее об ошибках сканирования...
Перед повторной проверкой убедитесь, что ваш сайт соответствует требованиям Google. Если запрос отклонен, внимательно изучите наше сообщение и устраните все возможные проблемы, прежде чем обращаться к нам снова.
Здравствуйте! Разберем очень важный инструмент для SEO-специалистов, вебмастеров - Яндекс Вебмастер . Распишем все функции, которые присутствуют в нем и для чего они нужны. Но сначала разберем, что же такое Яндекс Вебмастер?
Яндекс Вебмастер - это сервис, позволяющий управлять индексацией и частично влиять на ранжирование в поисковой системе Яндекс. Инструмент позволяющий структурировать отображение вашего сайта (добавив микроразметку, фиды, быстрые ссылки). Также позволяющий определить не попал ли ваш сайт под санкции поисковой системы, а это очень важно знать. В общем перечислять можно много и долго, но пойдем обо всем по порядку.
Почему нужно использовать Яндекс Вебмастер?Причин имеется множество,почему стоит использовать этот инструмент:
Контроль индексации сайта в Яндексе. Мы всегда сможем посмотреть какие страницы проиндексированы а какие нет;
Улучшенное отображение сниппета с помощью микроразметки Яндекс Вебмастера. Яндекс считывает определенный тип микроразметки, который может увеличить CTR вашего сниппета и количество переходов на сайт в несколько раз;
Переезд сайта на новый домен. Да в Вебмастере и такое имеется, важно только сохранить саму структуру URL страниц;
Возможно продвигаться по конкретному региону. Допустим мы находимся в Уфе, в Яндекс Вебмастере в разделе Региональность мы можем задать необходимый город и двигаться по нему.
И это только самые основные функции, также существуют и другие о которых я буду рассказывать по ходу вашего прочтения статьи.
Также после разработки нового сайта или доработки старого вам необходимо дать сигнал поисковым системам, что я внес все изменения можете его проверять. Этим сигналом для поисковой системы может служить:
Прописывание robots.txt в соответствии со всеми требованиями;
Добавление сайта в Google Search Console.
Так как речь идет о Вебмастере от Яндекса, то поговорим о том, как добавить свой сайт.
Как добавить сайт в Яндекс Вебмастер?Для начала необходимо перейти на сайт https://webmaster.yandex.ru и добавить сайт в Вебмастер.
В адресную строку прописываем адрес своего сайта
После этого необходимо подтвердить ваш сайт в Яндекс Вебмастере. Это можно сделать несколькими путями:
Подтверждение прав сайта в Яндекс Вебмастере через мета-тегДля этого необходимо разместить данный код в разделе вашего сайта. После размещения кода необходимо нажать кнопку “Проверить” .
Файл html на сервер/хостинг где расположен ваш сайт. После размещения html-файла необходимо нажать кнопку “Проверить” .
Для этого в настройках хостинга нужно прописать TXT-запись и после размещения нажать кнопку “Проверить” .
После подтверждения сайта мы попадаем на главную страницу Вебмастера - Сводка .
Диагностика сайтаВ разделе Диагностика сайта выводятся различные типы ошибок сайта, которые мешают продвигаться вашему сайту.
Вот какое определение дает этому сам Яндекс:
Яндекс Вебмастер заботится о качестве вашего сайта и предупреждает, если обнаруживает ошибки.
Сайт проверяется ежедневно. На странице сервиса отображаются ошибки, которые были найдены в течение всего дня. Чтобы посмотреть динамику проверки за прошедший период времени, нажимаем кнопку Другие дни.
Наличие информации об ошибках не влияет на ранжирование или индексирование сайта. Информация носит рекомендательный характер, кроме категорий «Фатальные» и «Критичные». Тем не менее, рекомендуем обращать внимание на сообщения, если для вашего сайта они отображаются.
Существует несколько типов ошибок, покажу для удобства в таблице, а затем разберем каждый тип более подробно.
Описание | Примечание |
|
Фатальные | Проверяется соединение с сервером, доступность сайта для индексирования, безопасность и соблюдение правил Яндекса | Могут вести к ухудшению ранжирования и полному исключению сайта из результатов поиска. |
Критичные | Проверяется срок действия домена сайта, количество неработающих внутренних ссылок, время ответа сервера |
|
Возможные проблемы | Проверяется корректность файлов Sitemap и robots.txt, настройки отображения несуществующих файлов, наличие редиректов, количество страниц-дублей и пр. | Могут влиять на качество и скорость индексирования страниц сайта |
Как правило, касаются улучшения представления сайта в результатах поиска | Позволяют улучшить представление сайта в результатах поиска |
Теперь разберем конкретнее какие ошибки могут встречаться в том или ином типе.
Фатальные ошибки
Сайт закрыт к индексации в файле robots.txt;
Не удалось подключиться к серверу из-за ошибки DNS;
Главная страница сайта возвращает ошибку;
Обнаружены нарушения или проблемы с безопасностью.
Критичные ошибки
Большое количество неработающих внутренних ссылок;
Долгий ответ сервера;
Ошибка обновления источника Турбо-страниц;
Источник Турбо-страниц (RSS-канал) не соответствует рекомендациям;
Возможные ошибки
Нет используемых роботом файлов Sitemap;
Обнаружены ошибки в файлах Sitemap;
Некорректно настроено отображение несуществующих файлов и страниц;
Ошибки в файле robots.txt;
Главная страница перенаправляет на другой сайт;
Большое количество страниц-дублей;
Не найден файл robots.txt;
В файле robots.txt не задана директива Host;
В файле robots.txt задана противоречивая директива Host;
Отсутствуют теги ;
Отсутствуют мета-теги ;
Файлы Sitemap давно не обновлялись;
Ошибки обновления RSS-канала;
Не задана региональная принадлежность сайта;
Сайт не зарегистрирован в Яндекс.Справочнике;
Файл favicon не найден;
Сайт не оптимизирован для мобильных устройств;
Ошибка счётчика Яндекс.Метрики.
Как только мы устранили ошибки нажимаем кнопку Проверить , тем самым даете сигнал роботу переобойти сайт на имеющиеся ошибки.
Безопасность и нарушения сайтаВ первую очередь под безопасностью Яндекс понимает: защита посетителей от спама, вредоносного кода и прочего мусора, который может мешать посетителю получать информацию с сайта.
Если ваш сайт заражен и имеет вирусы Вебмастер подскажет на какой странице он расположен и как это можно исправить.
Безусловно, вредоносный код может быть добавлен на сайт умышленно или случайно:
злоумышленником, который получил доступ к серверам или системе управления сайтом;
владельцем сайта (например, код баннерной системы, счетчика веб-аналитики) - сторонние ресурсы могут быть взломаны;
пользователем сайта, если есть возможность оставлять сообщения или загружать файлы.
Период проверок отличается у каждого сайта, поэтому данные о заражении могут обновляться с задержкой.
Сайт, на котором Яндекс Вебмастер нашел вредоносное содержимое, обязательно будет перепроверен. Если в ходе следующей проверки окажется, что сайт все еще заражен, проверки уменьшаться. Чем раньше сайт будет обеззаражен, тем быстрее Яндекс узнает об этом и снимет пометку об опасности для пользователей.
За что Яндекс может понизить ваш сайт в результатах поиска или заблокировать его вовсе?
Применение обманных техник, которые принесут существенный урон вашему сайту. В таблице расписал про каждое из нарушений:
Нарушение | Описание | Возможные ограничения |
Страницы и сайты, основной целью которых является перенаправление посетителя на другой ресурс, с помощью редиректа или ссылки. | ||
Клоакинг | Страницы и сайты, которые отдают разный контент пользователям и роботам поисковых систем с целью повлиять на ранжирование в поисковой системе. | Исключение из поиска страниц сайта |
Скрытый текст | Размещение на страницах сайта невидимого или слабовидимого текста с ключевыми словами, с целью повлиять на ранжирование в поисковой системе. | Исключение из поиска страниц сайта |
Неоригинальный, бесполезный контент | Сайты, которые содержат неоригинальный, вторичный, малополезный контент, а также сайты, создаваемые для продажи ссылок и заработка на рекламе. Подробно о некоторых наших методах борьбы с такими сайтами: алгоритмы АГС-30, АГС-40, изменения в работе алгоритма АГС. | Исключение из поиска страниц сайта, , аннулирование тИЦ |
Партнерская программа | Размещение на страницах сайта информации о товарах и услугах, предоставляемых другими сайтами в рамках партнерской программы. Как правило, такие сайты не имеют ценности для пользователя, поскольку не имеют собственного оригинального контента и не предоставляют никакого дополнительного сервиса. | |
SEO-тексты | Размещение на страницах сайта текстов, которые содержат неестественное, избыточное количество ключевых слов, чтобы повлиять на ранжирование в поисковой системе. При этом для маскировки могут использоваться элементы страниц, которые скрывают ключевые слова. Например, с помощью скроллинга или других технических приемов. Подробно об отношении Яндекса к SEO-текстам см. в статье Яндекс и поисковая оптимизация и записи об оптимизации текстов. | Исключение из поиска страниц сайта, понижение в результатах поиска |
Имитация действий пользователей | Имитация действий пользователей с целью повлиять на ранжирование сайта в поисковой выдаче. Подробно об отношении Яндекса к такому способу поисковой оптимизации см. в блоге Яндекс Вебмастера . | Исключение из поиска страниц сайта, понижение в результатах поиска |
Кликджекинг | Использование на сайте технологии кликджекинга - механизма обмана, связанного с размещением на сайте невидимых элементов, взаимодействие с которыми производится без ведома пользователей. Зачастую такой механизм применяется для получения персональных данных посетителя сайта без его согласия и выполнения действий от его имени в социальных сетях. Типичным примером кликджекинга является создание на сайте невидимых элементов поверх кнопок, форм, видеороликов и т. п. Также может использоваться перемещение этих невидимых элементов вслед за курсором по странице. Подробнее о кликджекинге см. в блоге Яндекс Вебмастера. | Понижение в результатах поиска |
Использование SEO-ссылок | Размещение на других сайтах SEO-ссылок для продвижения своего сайта. SEO-ссылки - это ссылки, основной целью создания которых является попытка повлиять на ранжирование в поисковых системах. К таким ссылкам относятся, в частности, ссылки, покупаемые с помощью ссылочных бирж и агрегаторов. Подробнее о нарушении. | Понижение в результатах поиска |
Использование на сайте раздражающих методов рекламы, мешающих пользователю просматривать основной контент сайта (popup, popunder, clickunder), а также рекламы с шокирующим содержанием. Подробно о том, как Яндекс учитывает удобство сайтов см. в блоге Яндекс Вебмастера . | Понижение в результатах поиска |
Так выглядит Вебмастер сайта, который понижен за дорвей .
Это Вебмастер сайта, который понижен за переоптимизацию .
Более подробно про то как продвигать сайт в 2018 году я рассказал в статье:
История поисковых запросовДанный раздел содержит статистическую информацию о поисковых запросах, доступных в разделе Последние запросы . Данные представлены в нескольких разрезах:
Название | Описание | Какие показатели можно отслеживать |
Содержит статистику по группам запросов, доступным в разделе Последние запросы. | По умолчанию отображаются: Можно выбрать другой показатель, например показы на позициях, клики с позиций, и построить отчет по каждому показателю отдельно. |
|
Содержит статистику по фразам с наибольшим количеством показов, по которым сайт отображался в результатах поиска за последние три месяца (учитываются первые 3000 позиций). |
||
Избранные запросы | Содержит статистику по фразам из группы «Избранные». |
|
Отображает динамику поискового трафика вашего сайта в сравнении с похожими сайтами. | Среднее количество кликов. |
Чтобы получить статистику изменения средней позиции сайта по всем группам запросов, выполняем следующие действия:
Группы ;
В поле Показатель выберите из списка параметр Ср. позиция;
В поле Регион выбераем из списка тот регион, в котором отслеживаем данные. В списке представлены регионы, в которых был хотя бы один показ сайта на первых 50 позициях в результатах поиска. Регионы отсортированы по количеству показов;
Используем опцию включить, чтобы получить данные только по указанному региону, или опцию исключить, чтобы получить информацию по всему миру, кроме указанного региона;
Указываем интервал дат, за который хотим получить информацию;
При необходимости изменяем детализацию выбранного периода времени: по дням, неделям или месяцам;
Также вы можем выбрать отдельную группу и увидеть статистику по общим показателям.
Просмотр статистики по отдельному поисковому запросуЧтобы сформировать отчет по поисковому запросу и всем доступным показателям, выполняем следующие действия:
Установливаем переключатель в положение Популярные запросы или Избранные запросы ;
В списке Все запросы выбираем необходимый запрос;
В поле Регион выбираем из списка тот регион, в котором отслеживаем данные. В списке представлены регионы, в которых был хотя бы один показ сайта на первых 50 позициях в результатах поиска. Регионы отсортированы по количеству показов;
Используем опцию включить , чтобы получить данные только по указанному региону, или опцию исключить , чтобы получить информацию по всему миру, кроме указанного региона;
Указываем интервал дат , за который хотим получить информацию;
При необходимости изменяем детализацию выбранного периода времени: по дням, неделям или месяцам.
Также мы можем проследить динамику отдельного показателя (например, показов на первой позиции) по всем фразам, доступным в группах Популярные запросы или Избранные запросы .
Пример отчета по запросамЦветом отражается увеличение (зеленым) или уменьшение (красным) показателя за выбранный период времени. Разница числовых значений рассчитывается по сравнению с аналогичным предыдущим периодом.
Чтобы перейти к отчету по группе запросов или отдельному запросу, нажимаем на нужную строку.
Яндекс Вебмастер собирает и анализирует статистику по поисковым запросам, которые привели посетителей на ваш сайт из результатов поиска. На основе этих данных формируется отчет, который позволяет сравнивать поисковый трафик вашего сайта с похожими сайтами за одинаковый период времени.
1. Чтобы просмотреть отчет, установливаем переключатель в положение Тренд .
2. Расчет показателей; Интерпретация данных отчета
Расчет показателей
Отчет содержит два показателя: среднее количество кликов для вашего сайта и группы похожих сайтов. Данные рассчитываются за выбранный период времени по т. н. точкам отчета. Точкой отчета является день, неделя или месяц в зависимости от выбранного типа детализации в отчете.
Для каждой точки подсчитывается количество кликов. Первой точкой отчета считается первый временной отрезок, в который были зафиксированы переходы на ваш сайт и на похожие сайты. Например, если выбран уровень детализации по дням, то первой точкой является первый день, для которого у Яндекс Вебмастера есть данные о кликах.
Поисковый трафик выражается в усредненных показателях. Это позволяет получить общее представление о динамике переходов на сайт по поисковым запросам.
Для вычисления показателей количество кликов каждой точки отчета делится на количество кликов первой точки. В результате показатель первой точки всегда равен 1.
В некоторых случаях число кликов в таблице отличается от чисел на графике. Например, в отчете одновременно выбран:
неполный временной отрезок, например сентябрь, октябрь полностью и три дня в ноябре;
уровень детализации неделя или месяц.
В этом случае на графике отобразится только выбранный период времени, а в таблице период будет дополнен отрезками времени с учетом уровня детализации.
В строке Динамика трафика отображается среднее количество кликов за период. Показатели в процентах позволяют увидеть динамику поискового трафика в сравнении с аналогичным предыдущим периодом. Цветом отражается увеличение (зеленым) или уменьшение (красным) показателя.
Данные в отчете могут отсутствовать, если в базе Яндекс Вебмастера недостаточно информации для расчетов.
Интерпретация данных отчетаС помощью отчета мы можем понять: влияют ли изменения на сайте на динамику переходов из результатов поиска.
Например, мы заметили спад посещаемости за последний месяц. Если на графике на одном отрезке времени линия Мой сайт и линия Похожие сайты изменяются в примерно одинаковом соотношении, то, скорее всего, причины снижения посещаемости не связаны с изменениями на сайте. Фактором такого влияния может быть сезонность.
Если линия Мой сайт проседает, а линия Похожие сайты в это же время идет вверх, то, скорее всего, изменения на сайте повлияли на эти показатели. Снижение количества кликов может быть связано с понижением позиций сайта в результатах поиска по анализируемым поисковым запросам. Причинами этого могут быть:
малая информативность или отсутствие мета-тега description;
заражение сайта вирусом;
наличие на сайте нарушений.
Проверить наличие этих причин можно в разделе Диагностика Яндекс Вебмастера .
Различие статистических данныхДанные, представленные в Яндекс Вебмастере, могут отличаться от данных Подбора слов (Wordstat) и Яндекс.Метрики. Например, сервисы могут по-разному учитывать время перехода на сайт (если он был сделан в 23.59), также причиной может быть разница часовых поясов.
Ниже перечислены основные причины различия данных Вебмастера и Wordstat:
Вебмастер учитывает показы и клики из результатов поиска до 50-й позиции, то есть в статистике учитывается только часть данных;
Данные могут отображаться с задержкой. Например, в Wordstat разница между получением данных и их отображением может занимать около месяца.
Данные Яндекс Вебмастера отличаются от данных Яндекс.Метрики, так как в статистике Вебмастера отображаются клики по ссылке на сайт из результатов поиска. В отчете Метрики Поисковые фразы показываются визиты, которые состоялись по таким кликам. При этом количество кликов не всегда равно количеству визитов, так как Метрика может не засчитать клик как визит. Основными причинами этого являются:
счетчик Метрики установлен на сайт некорректно;
на странице, на которую перешел посетитель из результатов поиска, отсутствует счетчик Метрики;
браузер посетителя не успел загрузить код счетчика;
HTTP-заголовок Referer не доступен для учета перехода из поисковой системы.
Раздел содержит информацию о поисковых фразах, по которым ваш сайт располагался на первых 50 позициях результатов поиска Яндекса. Для этих фраз представлено несколько показателей: показы, клики, позиция, CTR. Это усредненные значения за последние 7 дней, доступные в разделе История запросов.
По показателям и другим признакам все запросы могут быть объединены в группы (заданные сервисом или созданные вручную).
Группы запросовПо умолчанию в Яндекс Вебмастере доступно несколько групп запросов:
Все запросы - содержит фразы, по которым ваш сайт показывался в ТОП-50 результатов поиска Яндекса;
Загруженные - содержит фразы, которые были добавлены вручную;
Избранные - специальная группа. Позволяет отслеживать данные по отдельным запросам (например, отслеживать изменения позиций по ключевым фразам). Информация по каждому запросу из этой группы доступна в разделе История запросов;
Top 3, Top 10, Top 50 - содержат фразы, по которым ваш сайт показывался в ТОП (3, 10 или 50) результатов поиска Яндекса. По умолчанию в каждой группе установлен фильтр с указанием средней позиции сайта в выдаче.
Мы можем добавить собственные группы, чтобы объединить запросы, с которыми работаем чаще всего.
Примечание . Можно добавить до 500 запросов в одну группу (до 1000 запросов в группу Избранные). Для одного сайта может быть создано не более 100 групп.
Группа создается путем копирования поисковых запросов из общего списка, представленного в разделе. При этом мы можем использовать несколько способов:
Создать группу во время копирования
Внизу страницы нажмаем кнопку Копировать выбранные запросы в группу;
В появившемся окне вводим название группы и нажимаем кнопку Сохранить. Новая группа отобразится в списке Группы запросов.
Скопировать запросы в заранее созданную группу
Под списком Группы запросов нажимаем кнопку Создать группу;
В появившемся окне вводим название группы и жмем кнопку Сохранить. Новая группа отобразится в списке Группы запросов;
Выбираем группу Все запросы и отмечаем необходимые запросы;
Внизу страницы нажимаем кнопку Копировать выбранные запросы в группу;
В появившемся окне выбираем из выпадающего списка название созданной группы и нажимаем кнопку Сохранить. Запросы отобразятся в выбранной группе.
Скопировать запросы в группу Избранные
Выбираем группу Все запросы и отмечаем необходимые запросы;
Внизу страницы нажимаем кнопку Добавить запросы в избранное. Запросы отобразятся в группе Избранные.
Если мы только что создали новую группу, статистика по этой группе не будет отображена. Необходимо дождаться, пока данные будут накоплены в течение нескольких дней.
При необходимости мы можем управлять группой, а именно:
если для группы сохранен фильтр, его можно сохранить для другой группы.
переименовать;
Мы можем добавить в сервис поисковые фразы, которые не попали в список запросов. Загрузить фразы можно в группы Избранные, Top 3, Top 10 и Top 50, а также в группы, созданные вручную.
В сервисе доступно несколько способов загрузки запросов:
в виде текста;
с помощью TXT-файла.
Примечание . Количество запросов (строк) в тексте и файле не должно превышать 500.
Сразу после окончания загрузки фразы будут отображаться в группе, в которую их добавили. При этом список фраз будет автоматически отфильтрован по значению добавленные вручную. В этом режиме мы можем удалить добавленный запрос. Чтобы увидеть все фразы группы, выбираем значение по фильтру.
Также добавленные запросы всегда отображаются в группе Загруженные .
Фильтрация запросовЗапросы можно фильтровать по параметрам (например, числу показов в результатах поиска, числу кликов, тексту запроса и пр.).
Например, отфильтруем запросы по адресу страницы - сформируем список запросов, по которым сниппет этой страницы отображается в результатах поиска:
Выбираем фильтр URL в выпадающем списке и значение содержит. Затем вводем в поле часть URL (например, /category/);
Нажимаем кнопку Фильтровать.
По умолчанию в списке отображаются запросы. Чтобы в списке отобразились адреса страниц, нажимаем на название столбца URL.
Добавление нескольких фильтровЧтобы выбрать из общего списка нужные вам запросы, можно применить несколько фильтров. При добавлении фильтров используется оператор «И». Таким образом, каждая фраза в выборке будет отвечать одновременно всем заданным условиям фильтров.
Кроме этого, в фильтре по параметру Текст запроса можно указать условие с оператором «ИЛИ», используя символ |. Например, если указать в поле текст вебмастер|яндекс, то в результате отобразятся фразы, которые содержат хотя бы одно слово, указанное в условии фильтра.
Как правило, поисковые запросы различаются в зависимости от региона поиска. По умолчанию в разделе отображаются данные с учетом всех регионов. Чтобы указать нужный регион, используйте фильтр. В фильтре доступны регионы с наибольшим количеством запросов за месяц.
Рекомендованные запросы можно использовать в качестве условия таргетирования при ведении рекламы. Эффективность подобранных запросов можно оценить с помощью прогнозируемых показателей на основе данных Яндекс.Директа. Показатели представлены с условием входа в гарантированные показы:
количество показов;
количество кликов;
цена клика.
Прогноз строится с учетом статистики по показам и кликам за последние 28 дней. При расчете учитываются:
позиции, дни, время и регионы показов объявлений;
приводили ли эти показы к кликам;
ставки и списанные цены кликов.
Отображаемые в Вебмастере показатели могут отличаться от показателей в Директе из-за разницы во времени получения данных.
Кроме поисковых запросов сервис отображает URL страницы, которая показывается по тому или иному запросу в поиске. Эту страницу можно использовать в качестве целевой для переходов с рекламы.
Статистика обходаИндексирующий робот Яндекса регулярно обходит страницы сайтов и загружает их в поисковую базу. При этом робот может загрузить не все нужные вам страницы из-за их недоступности.
Яндекс Вебмастер позволяет узнать, какие страницы вашего сайта обходит робот и выявить адреса страниц, которые робот не смог загрузить из-за недоступности сервера, на котором находится сайт или из-за ошибок в содержимом самих страниц.
Данные о страницах доступны в разделе Статистика обхода Яндекс Вебмастера . Информация обновляется ежедневно в течение шести часов с момента посещения страниц роботом.
Страницы в поискеПоисковая выдача Яндекса регулярно обновляется. Страницы вашего сайта могут появляться в результатах поиска и пропадать из них.
С помощью информации, представленной в разделе Страницы в поиске, мы можем:
Следить за изменением количества страниц в поисковой выдаче Яндекса и за соотношением числа добавленных и исключенных страниц;
Получать информацию о дате последнего посещения сайта роботом и обновления поисковой выдачи;
Выяснить причину исключения страницы из результатов поиска.
По умолчанию сервис предоставляет данные по сайту в целом. Чтобы просмотреть информацию о конкретном разделе, выбираем его из списка в поле с адресом сайта. Доступные разделы соответствуют структуре сайта, известной Яндексу (кроме разделов, добавленных вручную).
Информация о страницах представлена следующим образом:
Новые и удаленные - соотношение количества страниц, появившихся в результатах поиска и исключенных из него;
Исключенные - динамика количества страниц, исключенных из результатов поиска;
История - динамика количества страниц, которые участвуют в поиске. Каждый сегмент графика соответствует отдельному разделу сайта;
Распределение - количество страниц, участвующих в поиске, отображается на круговой диаграмме, где каждый сегмент соответствует разделу сайта.
Более подробно разберем исключенные страницы, почему Яндекс их не индексирует:
Статус в веб-интерфейсе | Статус страницы | ||
Недостаточно качественная | Страница считается некачественной. | ||
Исключена по Clean-param | Страница была исключена из поиска в результате обработки роботом директивы Clean-param. | Чтобы страница индексировалась, измените файл robots.txt. |
|
Страница дублирует уже представленную в поиске страницу сайта. | Укажите роботу предпочтительный адрес с помощью 301 редиректа или атрибута rel="canonical". Если содержимое страниц различается, отправьте их на переобход, чтобы ускорить обновление данных в поисковой базе. |
||
Ошибка подключения к серверу | При обращении к сайту роботу не удалось установить соединение с сервером. | Проверьте ответ сервера, убедитесь в отсутствии блокировки робота Яндекса на стороне провайдера. Сайт начнет индексироваться автоматически, если станет доступным для робота. |
|
Ошибка HTTP | При обращении к странице возникла ошибка. | Проверьте ответ сервера. |
|
Запрещено элементом noindex | Страница была исключена из поиска из-за установленного запрета на индексирование (с помощью мета-тега robots со значением content="noindex" или content="none"). | Чтобы страница появилась в поиске, удалите запрет и отправьте ее на переобход. |
|
Неканоническая | Страница проиндексирована по каноническому адресу, который был указан в атрибуте rel="canonical" в ее HTML-коде. | Исправьте или удалите атрибут rel="canonical", если он указан некорректно. Робот отследит изменения автоматически. Чтобы ускорить обновление данных о странице, отправьте ее на переобход. |
|
Неглавное зеркало | Страница относится к неглавному зеркалу сайта, поэтому была исключена из поиска. | ||
Статус неизвестен | Страница известна роботу, но не участвует в поиске. | Проверьте ответ сервераили наличие запрещающих HTML-элементов. Если проблема актуальна, обратитесь к администратору своего сайта или сервера. Если страница уже доступна, отправьте ее на переобход. |
|
Не удалось скачать страницу | При обращении к странице роботу не удалось получить ее содержимое. | Проверьте ответ сервера или наличие запрещающих HTML-элементов. Если проблема актуальна, обратитесь к администратору своего сайта или сервера. Если страница уже доступна, отправьте ее на переобход. |
|
Редирект | REDIRECT_NOTSEARCHABLE | Страница осуществляет перенаправление, при котором индексируется его цель. | Проверьте индексирование страницы, на которую выполняется редирект. |
Запрет в robots.txt(весь сайт) | ROBOTS_HOST_ERROR | Индексирование сайта запрещено в файле robots.txt. Робот автоматически начнет посещать страницу, когда сайт станет доступен для индексирования. | |
Запрет в robots.txt(страница) | ROBOTS_TXT_ERROR | Индексирование страницы запрещено в файле robots.txt. Робот автоматически начнет посещать страницу, когда сайт станет доступен для индексирования. | При необходимости внесите изменения в файл robots.txt. |
Яндекс Вебмастер показывает разделы сайта, которые содержат не менее 10 страниц и составляют более 1% от общего числа страниц, загруженных в базу Поиска.
Разделы представлены в виде дерева в соответствии со структурой URL сайта. По каждому разделу сайта доступна информация о количестве страниц, которые были загружены роботом Яндекса и участвуют в поиске.
Проверить статус URLПроверить статус URL - это инструмент для отслеживания информации об индексировании Яндексом определенной страницы сайта. Он позволяет узнать состояние страницы в результатах поиска: обходит ли ее робот, участвует ли страница в поиске, а также причины ее исключения из поисковой выдачи.
Проверка страницыЧтобы получить данные об индексировании страницы, нужно выполнить следующие действия в интерфейсе Яндекс Вебмастера:
Выбираем из списка сайт, страницу которого необходимо проверить;
Переходим в раздел Индексирование → Проверить статус URL ;
В поле вводим адрес страницы, данные которой хотим получить и нажимаем кнопку Проверить .
Примечание. В поле можно ввести полный URL страницы или путь от корня сайта, начинающийся с «/». Например, если указывается URL http://example.com http://example.com http://example.com/news .
Система соберет данные о странице и сформирует отчет.
В процессе сбора информации отчет имеет статус «Проверяется» . Сбор и обработка информации производятся в течение нескольких минут. В некоторых случаях это может занять несколько часов. Как только обработка данных завершится, статус отчета изменится на «Проверено» . Статус «Не удалось построить отчет» сообщает о том, что произошла ошибка на стороне сервиса. В этом случае проверим страницу позже.
Просмотр отчетаЧтобы просмотреть отчет, нажимаем кнопку Подробнее .
Представленная в отчете информация основывается на текущем состоянии поисковой базы и на последних данных, полученных от индексирующего робота:
статус страницы в поиске;
статус страницы во время последнего обхода роботом;
дата и время последнего построения поисковой базы и обхода роботом;
URL страницы;
заголовок страницы (содержимое HTML-элемента title).
Также можно просмотреть отчеты, сформированные для конкретной страницы с помощью фильтрации.
Если контент на странице был изменен, робот автоматически отследит это. Данные в поисковой выдаче будут обновлены при следующем построении поисковой базы.
Важные страницыЯндекс Вебмастер позволяет получать актуальную информацию о процессе индексирования отдельных страниц и разделов сайта. Например, можно отслеживать появление в поиске новых страниц, получая уведомления об изменениях по электронной почте и в Яндекс Вебмастере.
Сбор информацииМы можем отслеживать любой URL сайта или воспользоваться рекомендациями сервиса.
Чтобы начать отслеживать индексирование страниц, в интерфейсе Яндекс Вебмастера:
Переходим раздел Индексирование → Важные страницы ;
В поле вводим URL страницы, информацию о которой хотим получить;
Можно ввести полный URL страницы или путь от корня сайта, начинающийся с «/». Например, если указывается URL http://example.com , то система обрабатывает информацию о странице http://example.com . Если указывается путь /news, обрабатывается информация о странице http://example.com/news ;
Нажимаем кнопку Отслеживать .
Вебмастер анализирует страницы сайта и может рекомендовать их для отслеживания. Страницы подбираются по количеству кликов и показов на поиске за период с понедельника по воскресенье. Они отображаются в блоке Рекомендованные страницы . Чтобы добавить страницу в список важных, напротив нее нажимаем кнопку Отслеживать . Если мы хотим добавить все рекомендованные сервисом страницы, нажимаем кнопку Отслеживать все .
Информация собирается и обрабатывается в течение нескольких минут. В некоторых случаях это может занять несколько часов.
Примечание . В поле может быть указано до 100 адресов для одного сайта. При достижении этого лимита рекомендованные страницы не отображаются. Отчет может содержать до 100 изменений для каждого заданного адреса.
Состояние страницыЯндекс Вебмастер отображает состояние страницы на момент последнего обхода роботом и на момент последнего обновления поисковой базы.
После добавления URL и сбора информации в разделе Яндекс Вебмастера можно найти наиболее важные данные о состоянии страницы на текущий момент:
версия и статус страницы в поиске (например, «Участвует в поиске»).
Сервис постоянно проверяет, что представлено в поиске и какую информацию получил поисковый робот. Когда робот узнает об изменении состояния страницы или статус страницы в поисковой базе изменится, информация об этом отобразится в сервисе, само изменение выделится цветом:
дата изменения;
дата последнего обхода страницы роботом и ответ сервера, полученный при этом;
версия и статус страницы в поиске.
При необходимости можно продолжить работу с проверенной страницей, нажав кнопку:
Проверить ответ сервера - откроется раздел Проверка ответа сервера с результатом проверки выбранного URL;
Переобойти страницу - откроется раздел Переобход страницы, при этом выбранная страница отобразится в списке отправленных на переобход со статусом «В очереди».
Чтобы своевременно узнавать о произошедших изменениях, можно настроить уведомления о важных событиях.
Переобход страницФайлы Sitemap
С помощью файла Sitemap можно сообщить Яндексу об актуальной структуре сайта, указав специальную директиву в robots.txt или добавив в Яндекс Вебмастер.
Инструмент позволяет сообщить поисковой системе о смене доменного имени сайта, используемого протокола, выбрать предпочтительное отображение сайта в результатах поиска (с префиксом www или без него), а также расклеить зеркала.
Он работает в двух режимах: изменение адреса сайта (переезд) для сайтов, которые не являются неглавными зеркалами и отклейка, доступная только для неглавных зеркал. Мы можем проверить, является ли сайт неглавным зеркалом.
Использование инструмента в режиме переезда предполагает наличие корректных указаний на главное зеркало, которыми могут являться редирект, а также директива Host в файлах robots.txt всех зеркал сайта. В рамках переезда может произойти смена главного зеркала сайта или объединение соответствующих зеркал в группу, если они еще не были склеены между собой ранее.
В режиме отклейки можно отправить заявку на расклейку зеркал в том случае, если они уже не возвращают один и тот же контент. После окончания процесса расклейки, такие сайты начнут
восприниматься поисковой системой как отдельные, несвязанные между собой ресурсы.
Скорость обходаРоботы Яндекса постоянно индексируют сайты: обходят их с некоторой регулярностью и загружают страницы в свою базу.
Скорость обхода сайта - это количество запросов в секунду, которое робот отправляет на ваш сайт.
Настройка скорости обхода заменяет директиву Crawl-delay, которая указывается в файле robots.txt.
Как изменить скорость обхода робота в Яндекс Вебмастере?Внутренние ссылкиРаздел содержит примеры неработающих внутренних ссылок вашего сайта.
Список примеров ссылок формируется на основе данных робота Яндекса. Ссылка может считаться неработающей, если допущена ошибка в адресе (URL) страницы, URL страницы изменился или страница не существует.
При обнаружении таких ссылок рекомендуем исправить их, так как они отрицательно влияют на удобство сайта для пользователей. Также, скорее всего, эти ссылки являются исключенными из индекса Яндекса. Подробная информация об этом доступна в разделе Индексирование (Статистика обхода).
В интерфейсе может отображаться для одного сайта до 10 000 внутренних неработающих ссылок.
Внешние ссылкиРаздел содержит примеры ссылок, которые ведут с других ресурсов на ваш сайт. Информация представлена о ссылках со страниц, которые известны роботу. Тем не менее, некоторые ссылки могут не отображаться в разделе.
Робот Яндекса регулярно проверяет наличие и работоспособность внешних ссылок. По результатам этих проверок в разделе могут быть доступны следующие сведения:
тИЦ ресурса;
Эта информация позволяет отслеживать появление новых ссылок и выявлять неработающие ссылки. Кроме этого, мы можем сформировать отчет только по удаленным ссылкам и получить сведения о дате удаления каждой из них.
Региональность сайтаРаздел содержит информацию о том, какие регионы определены для вашего сайта:
с помощью Яндекс.Справочника, если добавлена организация;
с помощью сервиса Яндекс Вебмастер или автоматически роботами Яндекса.
Примечание . Принадлежность к какому-либо региону не исключает сайт из результатов поиска в других регионах. Он может быть найден пользователями из любого региона, если содержимое сайта будет признано релевантным запросам.
Как изменить региональность сайтаЧтобы изменить регион сайта, указываем регион, который хотим установить, и в соответствующем поле - URL страницы своего сайта, подтверждающей его региональную принадлежность. Затем сохраняем изменения.
После этого модератор проверит соответствие выбранного региона и контактной информации на сайте. Для подтверждения региона нужно, чтобы сайт был доступен, на нем не было вирусов. Также проверьте, что контактная информация заметна на сайте и размещается на видном месте.
Когда регион будет подтвержден, информация об этом появится в разделе Региональность Яндекс Вебмастера . Изменения вступят в силу после следующего обновления поисковой базы - в течение 2 недель.
Чтобы отредактировать регион, определенный через Яндекс.Справочник, достаточно отредактировать карточку своей организации в Справочнике . Информация в Яндекс Вебмастере обновится автоматически в течение нескольких дней.
Оригинальные текстыУникальный или оригинальный текст - это текст, величина которого составляет от 500 до 32000 знаков, этого текста нет в интернете, а мы опубликовываем его на своем сайте.
Регистр имени сайтаИнструмент позволяет изменить написание адреса сайта в результатах поиска, чтобы сделать его более понятным и информативным для пользователей.
Такое изменение не влияет на результаты ранжирования в результатах поиска.
Изменения регистра должны быть направлены исключительно на улучшение читаемости имени домена и отвечать следующим требованиям:
Недопустимо более пяти заглавных букв подряд;
Нельзя изменять регистр имени сайта для интернациональных доменов. Например, сайт.рф, но не Сайт.рф;
Указываются только в нижнем регистре:
домены первого уровня - например, ru, info, com, com.ua, org.ru, net.by;
префиксы - например, www, w3, ftp.
С заглавной буквы могут начинаться имена собственные, если это не противоречит п.3. Например, Name.example.com, www.Napoleon.com ;
Заглавные буквы в общеизвестных аббревиатурах или аббревиатурах, подтверждающихся контентом сайта, допустимы в соответствии с правилами русского языка. Например, NASA.com, RusPromAuto.ru;
Если все слова доменного имени разделены дефисами, то регистр можно изменять только в случаях, описанных в п.4 и п.5. Например, Moscow-one-love.ru; VTB-bank.ru;
Если доменное имя состоит из нескольких слов неразделенных дефисом, то начинаться с заглавной буквы должны все слова (www.Edison.yandex.com , но не www.Edison.yandex.com или www.Edison.yandex.com).
Быстрые ссылкиосновные разделы и страницы доступны с главной страницы сайта;
навигация по сайту продумана и логична;
названия страниц короткие, понятны и точно отражают их содержание;
содержимое элемента title совпадает с ее заголовком (выделенным элементом h1) и с текстами внутренних ссылок, которые ведут на эту страницу.
Подтвердив права на управление сайтом, Мы получили доступ к информации об индексировании страниц сайта роботом Яндекса. Эти данные могут содержать конфиденциальную информацию, поэтому Яндекс должен убедиться в том, что у вас есть право на управление сайтом.
Для подтверждения прав нужно внести изменения на сайт. Владелец сайта может измениться поэтому Яндекс периодически проверяет наличие изменений, подтверждающих право на управление сайтом. Если при очередной проверке эти изменения не будут обнаружены, то сайт вновь перейдет в разряд «неподтвержденных».Проверка прав может занимать до 24 часов.
ЗаключениеСтоит ли использовать данный инструмент при продвижении сайта - однозначно да, так как он имеет множество функций присущих именно для поисковой системы Яндекс. Что касается Гугла то скоро подготовлю еще один полноценный лонгрид. Всем удачи, надеюсь моя информация для вас была полезна!
Всем привет! В данной статье затронем тему безопасности, а именно безопасный протокол передачи данных — https. Если вы обратили внимание мой блог, на котором вы сейчас находитесь работает по протоколу https, на который я перешел недавно. Также, на https я перевел один из моих клиентских сайтов. Пришлось немного повозиться и понервничать, но в итоге все получилось. Я подумал, что надо обязательно написать об этом на блоге — как перейти с http на https безболезненно для сайта, тем более эта тема я считаю уже популярна, т.к. сегодня все больше и больше сайтов переходят на https.
Что меня побудило перейти на протокол https? В последнее время мне на глаза стали попадаться вот такие заголовки: Браузер Mozilla Firefox в скором времени перестанет поддерживать небезопасные http-соединения; всем государственным сайтам перейти на HTTPS; C января 2017 года все сайты, передающие секретные данные (пароли, номера кредитных карт и т.д.) по незащищенному соединению в браузере Google Chrome будут помечаться как небезопасные. Плюс ко всему где-то в интернете читал, что скоро всем сайтам придется перейти на протокол https в обязательном порядке. Я подумал, что в один прекрасный день все равно эта участь постигнет и меня. Так зачем же тянуть? Тем более хостинг beget.ru , на котором я сижу предоставил возможность для приобретения бесплатных SSL-сертификатов. В общем, собрал всю необходимую информацию по тому, как перейти с HTTP на HTTPS и сделал это. 🙂
Структура статьи
Зачем нужно использовать https и что имеется ввиду под безопасностью?Если говорить кратко, то протокол https позволяет отправлять запросы на сервер с нашего сайта в зашифрованном виде, гарантируя при этом, что эти самые данные не будут перехвачены хакерами. Элементарный пример передаваемых данных — это авторизация на сайте (или регистрация). В процессе авторизации мы отправляем запрос на сервер, который содержит логин и пароль. Так вот, если отправлять эти данные по небезопасному соединению, то они легко могут быть перехвачены, что в результате может привести к взлому сайта. Работу протокола https обеспечивают SSL сертификаты. Они бывают разных видов, про виды сертификатов читайте ниже.
Весь процесс я решил разделить на шаги и выполнять их как раз именно в такой последовательности. Также ниже я дам рекомендации по переходу для популярных cms Joomla и WordPress. У каждого есть свои особенности.
Приобретение сертификатаДля начала необходимо приобрести SSL сертификат, чтобы ваш сайт был доступен по обоим протоколам — http и https. Давайте сначала внесем некоторые ясности в виды SSL сертификатов.
Виды сертификатов Простые сертификатыТакие сертификаты выдаются на один или несколько доменов и подходят как физическим, так и юридическим лицам. Как правило, на выпуск таких сертификатов не уходит много времени, может быть выпущен даже в течении 5 минут. Чтобы получить такой сертификат необходима только проверка принадлежности к домену того, кто его запрашивает.
Wildcard SSLWildcard SSL — прекрасно подойдет сайтам с наличием поддоменов. В данном случае достаточно выпустить один сертификат, который будет работать на всех поддоменах и позволит сэкономить деньги на покупку отдельных сертификатов.
Мультидоменные SSL сертификатыМультидоменный SSL сертификат — сертификат, который может поддерживать сразу несколько доменов. Также, как и Wildcard позволит сэкономить денежку. Так что имейте ввиду, если у вашей компании или проекта имеется несколько доменных имен, то выбирайте именно мультидоменный сертификат.
EV (Extended Validation) сертификатыEV (Extended Validation) — расширенная проверка компании. Данный вид сертификата могут позволить себе купить только крупные компании. Для его получения необходимо предоставить всю подробную информацию о компании — название организации, реквизиты, наличие о государственной регистрации, реальные звонки для утверждения полученных данных и многое другое. Да, получение такого вида сертификата дело хлопотное, но поверьте оно того стоит. Более того, рядом с адресной строкой в браузере будет отображаться название компании. Вот как это выглядит на примере сайта Сбербанка.
Смотрится круто и повышает доверие потенциального клиента. Поэтому, владельцам крупных компаний рекомендуется выпуск именно EV сертификатов.
Сертификаты с поддержкой IDNНе все сертификаты поддерживают кириллические домены. Если у вас домен кириллицей в зоне РФ, то вам следует приобрести сертификат с поддержкой IDN.
Подробнее про виды сертификатов и их стоимости вы можете почитать в интернете. Здесь же я привел лишь некоторые, чтобы вы имели понятие, что сертификаты SSL бывают разные.
Получение сертификатаСегодня приобрести сертификат SSL для сайта можно абсолютно бесплатно. Уже давно Google заявил о том, что пора уже переходить всем на безопасный прокол https и что предпочтение в ранжировании будет отдаваться сайтам именно с защищенным соединением. Кстати, это еще одна причина по которой я перешел на https. В общем, в связи с этим всем в свет появился проект под названием Let’s Encrypt . В первую очередь данный проект рассчитан на доступность приобретения SSL сертификата, а также облегчить жизнь рядовым веб-разработчикам с установкой сертификатов (генерация приватных ключей и прочее). И что самое главное — сертификаты, выдаваемые Let’s Encrypt, абсолютно бесплатные . Лично на моем блоге стоит именно такой сертификат.
Я получил сертификат SSL от Let’s Encrypt в панели управления beget.ru. Если вы пользуетесь данным хостингом, то получить его будет проще простого. Заходите в панель управления Бегет, далее переходите в раздел «Домены » и в списке доменов щелкаете по иконке SSL.
Иконка рядом с доменом говорит о том, что сертификат уже установлен. Попав в раздел SSL, открываем вкладку «Бесплатный SSL сертификат «. Если у вас имеются поддомены на выбранном домене, то лучше сразу выберите и их тоже, т.к. если этого не сделать сразу, то в дальнейшем придется перевыпускать сертификат.
Для перевода сайта на HTTPS необходимо выполнить некоторые настройки на сайте, касается это загружаемых ресурсов. Что подразумевается под ресурсами, это — скрипты, стили, картинки, аудио, видео, т.е. все те ресурсы, которые загружаются браузером с вашего сайта через протокол http. Существуют относительные и абсолютные адреса. Чем они отличаются?
Относительный адрес:
/image.jpg
Относительный адрес вне зависимости от протокола:
//sitename.ru/image.jpg
Абсолютный адрес:
http://sitename.ru/image.jpg
В абсолютном адресе указывается доменное имя сайта с протоколом. Так вот, при переходе на https необходимо применять относительные адреса вне зависимости от протокола, т.е. отсекая сам протокол. При таком подходе ресурсы будут загружаться по такому же протоколу, что и ваш и не важно на http он или на https. Единственное условие — если вы загружаете ресурсы с внешних сайтов (например, с CDN), то данные сайты должны быть доступны по https, иначе от них придется отказаться.
Также, как вариант вы можете просто указать все абсолютные ссылки с протоколом https (так например сделано в WordPress).
ТегОбратите внимание, если вы на сайте используете тег с адресом сайта, то обязательно проследите, чтобы адрес был указан с протоколом https.. Данный тег не является обязательным, но все же, если в вашей cms он используется, то потрудитесь его исправить в случае чего. Находится он в самом начале секции . Если получится так, что вы все ссылки изменили на относительные вне зависимости от протокола (//sitename.ru), а в теге содержится адрес с http, то все ваши относительные ссылки будут считаться относительными в зависимости от протокола http. В результате в консоле браузера вы получите кучу ошибок, а на сайте поплывет дизайн.
Тег rel=»canonical»Если у вас на сайте используется тег rel=»canonical», то проследите за тем, чтобы канонический адрес страницы в данном теге был абсолютным с указанием протокола https. Иначе, если будет http он будет работать только во вред.
301 редирект с http на httpsЧтобы не потерять трафик нам необходимо сделать так, что когда пользователь заходит на сайт по протоколу http его бы автоматически перекидывало на https. Склейка зеркал и переиндексация сайта в поисковиках дело долгое (Гугл правда быстро реагирует, вот с Яндексом придется ждать), поэтому 301 редирект может это дело ускорить и не дать потерять трафик. Для этого в файл.htaccess нужно добавить всего две строчки:
RewriteCond %{SERVER_PORT} !^443$ RewriteRule ^(.*)$ https://sitename.ru/$1
Этих двух строк должно хватить. Если же у вас будут проблемы с редиректом, то можете попробовать альтернативный код.
RewriteEngine On # Если этой строки нет выше RewriteCond %{HTTP:X-Forwarded-Protocol} !=https RewriteRule .* https://%{SERVER_NAME}%{REQUEST_URI}
А вот еще один код редиректа. Бывало такое у меня, что выше два кода не работали. Помог только этот.
RewriteEngine On RewriteCond %{HTTPS} off RewriteCond %{HTTP:X-Forwarded-Proto} !https RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI}
Если и это не поможет, то вам надо будет обратиться в службу поддержки хостинга, они должны помочь с этим вопросом.
Еще советую добавить код, который будет перекидывать по 301 редиректу на www или на без www, в зависимости от того, какой домен вы выбрали основным.
## редирект с без www на www: RewriteCond %{HTTP_HOST} ^sitename.ru$ RewriteRule ^(.*)$ https://www.sitename/$1 ## редирект c www на без www: RewriteCond %{HTTP_HOST} ^www.sitename.ru$ RewriteRule ^(.*)$ https://sitename.ru/$1
Файл robots.txtВ robots.txt нам обязательно следует указать главное зеркало с протоколом https. Также указать ссылку на карту сайта так с протоколом https. Вот как я сделал на своем блоге:
Host: https://сайт Sitemap: https://сайт/sitemap.xml
Переезд сайта в панели вебмастеров Яндекс и ГуглПосле вышеперечисленных действий нам необходимо сообщить поисковикам, что сайт переехал на новый протокол https. Как известно адрес с http и с https это абсолютно два разных адреса в глазах поисковиков.
Яндекс вебмастерДля переезда сайта в Яндекс заходим в панель Яндекс Вебмастер по адресу https://webmaster.yandex.ru . Выбираем свой сайт и в разделе «Настройка индексирования » вводим свой домен и отмечаем чек-бокс «Добавить HTTPS «, сохраняем.
Http://сайт https://сайт http://www..сайт
Далее выбираем основное зеркало с https естественно, только с www или без www. Для своего сайта я выбрал без www — https://сайт . Открываем сайт и в настройках сайта (кликаем по шестеренке справа) указываем основной домен. Вот на примере моего блога.
Ну вот, на этом все. Если вы сделали все правильно, то в браузере рядом с адресной строкой у вас должен появиться зеленый замочек. Хотелось бы отметить, что если хотя бы один ресурс будет загружаться по незащищенному протоколу, то зеленого замочка вы не увидете, будет серый восклицательный знак. Отследить загрузку всех ресурсов вы можете в .
Также хотелось бы сказать, что процесс переиндексации в Гугл занимает не так много времени, примерно 2 недели хватит, а может и меньше. Вот в Яндекс по сложнее с этим, я и не удивлен. Яндекс всегда был тугой в этом плане. В первое время у вас обнулится ТИЦ, если он у вас был и в первый же апдейт ТИЦа должен будет вернуться. Это я написал, чтобы вы не пугались. Ну а далее в Яндекс Вебмастер вы обнаружите следующую картину…
Прошло довольно приличное время после перехода на https и как видите по скрину еще не все страницы перешли на https. Что сказать, так устроен отечественный поисковик.
Парус слов про Яндекс Метрику. Если у вас был установлен код яндекс метирки, то в панели метирики вам придется добавить сайт заново с протоколом https.
Переход на HTTPS в JoomlaОбновлено - 15.12.2016
В последних версиях Joomla с переходом на https не должно возникнуть проблем. В файл.htaccess не обязательно добавлять директивы редиректов, движок сам перекинет с http на https. Для этого необходимо просто включить опцию в общих настройках Joomla — «Сервер » -> «Включить SSL » -> «Весь сайт» .
Важно! Включайте данную опцию именно тогда, когда вы уверены, что сертификат у вас уже установлен и сайт доступен по протоколу Https.
Один раз у меня было такое, что мне пришлось немного потрудиться, на одном из клиентских сайтов переход на https прошел не так гладко. Браузер ругался на относительные адреса загружаемых ресурсов, хотя адреса были указаны относительными вне зависимости от протокола. Проблема была в теге . Давайте расскажу по порядку.
Помимо тех настроек сайта, что были указаны выше нам необходимо открыть файл configuration.php и в поле live_site вписать абсолютный адрес с проколом https.
Public $live_site = "https://sitename.ru";
По идее после этой настройки в теге адрес сайта должен быть указан с протоколом https. Но нет, он был указан с протоколом http, от того и пошли все ошибки. Поискал решение проблемы в интернете, конкретно на форуме joomlaforum.ru и нашел решение. Необходимо было сделать некоторый хак ядра, правда уверяли, что после обновления данные изменения не затрутся. Открываем файл — /libraries/joomla/document/renderer/html/head.php и заменяем (77 строка)
$buffer .= $tab . "" . $lnEnd;
$buffer .= $tab . "" . $lnEnd;
Скажу сразу — после обновления движка изменения все же затираются и вам придется после каждого обновления вносить правки в вышеуказанный файл.
Пока я эту проблему так и не решил. Не понимаю почему так происходит — версия движка последняя.
После этих действий все пришло в норму. Также в общих настройках Joomla, включил SSL. Ее включение привело к неработоспособности сайта. Если вдруг вы выбрали опцию «Весь сайт » и сайт перестал работать, то вам необходимо открыть файл configuration.php по Ftp, найти $force_ssl и установить значение на 0.
Public $force_ssl = "0";
После этого сайт заработает.
Переход на HTTPS в WordPressВ принципе для перехода на https в WordPress никаких дополнительных действий, помимо вышеперечисленных делать не нужно. Единственное нужно поменять адрес сайта на https в общих настройках WordPress. Но эту настройку необходимо сделать только после приобретения SSL сертификата, когда ваш домен будет доступен по протоколу https, иначе в админку вы не сможете попасть.
Также, желательно сделать бэкап сайта на всякий случай. Просто дело в том, что в WordPress все адреса хранятся в базе данных в абсолютном виде. После изменения настройки сайта все адреса должны поменяться и в базе данных. Поэтому на случай, если пойдет что-то не так сделайте бэкап.
На этом и завершу. Всем спасибо за внимание. Не стесняемся, задаем вопросы в комментариях.
Добрый день друзья. На связи Александр Мельничук, и сегодня я бы хотел рассказать вам о сервисе, с помощью которого можно проводить бесплатный SEO-анализ сайта и его аудит в считанные секунды. Наверняка, многие из вас уже встречали подобные онлайн-инструменты, и пользуются ими на постоянной основе. Действительно, это очень удобно, указал адрес домена или проверяемой страницы и в течение 10 секунд получил полную картину по проблемным местах своего сайта.
Инструмент Sitechecker.pro как раз и предназначен для решения подобных вопросов и обладает рядом преимуществ:
1) Детальный аудит сайта. Ваш сайт или страница будут оценены по 156-параметрам. В итоге, Вебмастер получает комплексную оценку своего сайта и видит его проблемные места;
2) Подсказки по устранению проблемных моментов. Сервис проверки сайтов, не только показывает проблему на вашем ресурсе, но и предлагает детальные решения по устранению этих ошибок;
3) Быстрая проверка. В среднем время на проверку сайта или отдельного url составляет около 7 секунд;
4) Полностью бесплатный. Инструмент работает исключительно на бесплатной основе и без ограничений по количеству проверок;
5) Поддержка 10 языков. Интерфейс сайта может быть доступным на 10 разных языках для удобства пользователей.
Тестирование сервисаЭтот обзор был бы не полным и не объективным, если бы я просто сделал описание сервиса, без демонстрации конкретных результатов. Поэтому, поехали. Для анализа, я возьму произвольный сайт, и посмотрим, какие результаты покажет сервис.
Вставляем адрес сайта на главной странице сервиса Sitechecker.pro и нажимаем кнопку Проверить. Через несколько секунд получаем детальный анализ сайта с пояснениями по проблемам.
Важно! Работа сервиса организована в формате лэндинга, поэтому вся необходимая информация располагается на одной странице, что очень удобно для анализа. В первую очередь обращайте внимание на критические ошибки, потом на предупреждения.
Для удобства пользователей с левой стороны сервиса расположена быстрая навигация по сервису с 5-ю направлениями проверки, а в правой области экрана результаты.
Начнем с 1-го блока – Оптимизация контента, кликнув по которому открывается дополнительное меню.
В этом блоке проверяются:
— Основные параметры страницы: ее ответ (код ответа http), и размер содержимого на странице;
— Title-проверка: будет показан сам title и его длина. Обратите внимание, если есть проблема по отдельному элементу, то это будет обозначено красным значком x и под указанием проблемы будет указан способ по ее устранению;
— H1-H6 проверка: будут показана все теги от H1 до H6 в исходном коде страницы;
— Проверка Description: осуществляется проверка по мета-тегу описания страницы с подсчетом символов и демонстрацией отображения этого описания в сниппете Google;
— Проверка контента. Интересный анализ контента, при котором подсчитывается количество символов на странице и идет подсчет соотношения величины контента к коду. Таким образом, можно определить слабые страницы на вашем сайте, где контента недостаточно;
Блок — Изображения
— Проверка Favicon: будет показана информация о присутствии фавиконки на вашем сайте, а также ее отображение на разных типах устройств;
— Проверка изображений на сайте: идет проверка к каждой расположенной картинке на проверяемой странице на наличие тегов – alt и title, а также указание размера к каждому изображению;
Блок — Поисковая оптимизация
— Проверка канонических ссылок: инструмент проверяет наличие канонической ссылки на странице;
— Проверка альтернативных ссылок;
— Индексирование поисковыми системами: данный элемент анализа показывает текущую информацию об индексировании анализируемой страницы. Обратите внимание на процентный показатель закрытого контента в теги noindex, сервис показывает и эту информацию;
— Пагинация: определение страниц пагинации на сайте;
— Уязвимость URL: идет анализ url-адреса страницы и выявления на ней потенциальных уязвимостей;
— Проверка маскировки: проверка на сканирование роботами поисковых систем Яндекса и Google.
— Внутренняя перелинковка сайта: будут показаны все ссылки перелинковки со страницы;
— Внутренние страницы: показаны страницы, на которые ведут ссылки с проверяемой страницы с указанием url-адреса, анкора ссылки и ответа их сервера.
Блок — скорость веб-страницы
— Мобильный предосмотр: демонстрация вашего сайта на экране мобильного устройства;
— Удобство работы (мобильная версия): оценка мобилопригодности вашей страницы по всем основным параметрам. Вот лишь часть из них;
— Удобство работы (десктоп-версия): проверка удобства работы в десктопной версии и рекомендации по исправлениям.
Мой вердикт (плюсы и минусы)
Если рассматривать сервис по аналогии с другими подобными проектами (например, pr-cy или cy-pr), а это будет наиболее объективная оценка (по крайнем мере, я так считаю), то он имеет ряд преимуществ: не нужно проводить никакой регистрации, чтобы получить определенные преимущества в проверке(в сервисе анализа сайта Sitechecker.pro ее просто нет), также не нужно ждать окончания результатов кэширования на сутки, как в других сервисах, ввел адрес сайта, получил актуальные данные.
Ну и последнее, чтобы я хотел отметить, так это четкое описание каждого параметра проверки и детальное решение проблемы путем внесения правок согласно рекомендациям из сервиса.
Что касается минусов, то я их практически не обнаружил. Пишу практически, так как в инструменте проверки — Внешние ссылки, при анализе моего блога вместо 3-х исходящих ссылок, сервис показал всего 2. И было бы круто, если бы разработчики сервиса, внесли некоторые изменения в алгоритм работы данного элемента, таким образом, чтобы он показывал, закрыта ли ссылка от индексации атрибутами – noindex и rel=»nofollow». Ребята, если вы читаете этот пост, усовершенствуйте, пожалуйста, данный модуль.
Данная ошибка выводится в отчете после проверки определенных страниц сайта на доступность в поисковой системе Яндекс. Делается это через специальный сервис Яндекс.Вебмастер (инструмент «Индексирование» -> «Проверка URL»).
Что за ошибка?Это означает, что робот посетил её, но не удосужился внести её в поисковую выдачу, сочтя её некачественной и вообще — вы спамер, у вас много рекламы, исправляйте всё немедленно, а потом поговорим! Самое удивительно то, что «некачественным» он иногда считает материал по 5000-10 000 знаков копирайта и отличным положением у конкурента в поиске (у меня не проиндексированная страница в Я была в ТОП-3 в G )
Симптомы:Чтобы повысить качество сайта и страниц в глазах Яндекса, нужно, как это ни странно, воспользоваться советами его самого. Дело в том, что в Я.Вебмастере в разделе «Диагностика» есть список текущих ошибок, которые вполне могут повлиять на выдачу
Что конкретно нужно исправить и как это сделать? Воспользоваться инструментом «Переобход страниц»В Яндекс. Вебмастере есть специальный сервис, заставляющий робот заново посетить вашу страницу «Инструменты» — «Переобход страниц» . Заставьте робота еще раз посетить вашу страницу. Идеальный вариант — немного добавить контента или хотя бы поменять где-то текст. В общем, видоизмените страницу, на которую будете ссылаться.
Удалить дубли, запретить их к индексацииПрактически самый главный враг хорошей индексации отдельных страниц, которые не попадают в выдачу — это дубли. Дубли страниц, которые генерирует сама CMS, будь-то WP или DLE. Причем дубли могут быть совсем не явные, т.е. как таковых «вторых» страниц с таким же контентом нет, но есть страницы, у которых срабатывает редирект на основной материал. Их можно отследить в Я.Вебмастере. Для этого зайдите в меню «Индексирование» -> «Статистика». Далее выберитерядом с названием сайта категорию «HTTP-коды 3хх»
Как видите страниц с редиректом пруд пруди:
Самое интересно то, что еще одним стандартным сервисом «Яндекса» дубли не удалить сходу: Пишет ошибку «Нет основание для удаления». Т.е. яндекс не может просто убрать страницу с поиска, если даже вы этого хотите. Ему нужны основания
Для того, чтобы перестали генерироваться дубли и для того, чтобы их можно было удалить с поисковой выдаче нужно проделать следующие шаги
- Прописать строчку кода в файле functions.php (если у вас Word Press)
Обычно этот файл находится в директории с названием вашей темы. Для редактирования можете использовать FTP ну или встроенный редактор в админке WP — это на ваше усмотрение. Вставляем следующий код
remove_action(‘wp_head’, ‘wp_shortlink_wp_head’);
- Настроить файл robot.txt
Чтобы запретить индексацию дублей нужно создать соответствующее правило в файле robot.txt
Disallow: /?p=*
Т.е. страницы вида «site.ru/?p » запрещены к индексации. Кстати, на Word Press проще всего добавить это правило также через код в том же файле functions.php. Результат удаления URL через Я.Вебмастер теперь положительный:
Создать карту сайта (Sitemap)Карта сайта создана специально для упрощения навигации не только пользователей, но и поисковых роботов. Поэтому, если вы считаете, что вашем посетителям она ни к чему, то сделайте её хотя бы для поисковой системы. Давно доказано — файл Sitemap улучшает индексацию страниц и сайта в целом! Для того, чтобы создать файл Sitemap.xml в CMS Word Press используйте плагин «Google XML Sitemaps».
Чтобы показать Яндексу, что файл у вас создан и может использоваться роботом в Я.Вебмастере зайдите в «Настройка индексирования» — «Файлы Sitemap» и вставьте ссылку на неё (учтите, что статус «Очередь на обработку будет висеть достаточно продолжительное время»)
Заполнить мета тэг name descriptionДля каждой странице нужно заполнить её краткое описание, которое содержится в специальном мета тэге . Поисковые алгоритмы будут использовать данный тэг для формирования описания страницы при выдаче результатов поиска (т.н. сниппет)
Чтобы не заморачиваться с правкой кода, мы можем использовать плагин для Word Press — Meta Tag Manager , который добавляет в конце редактора специальный контейнер, где можно его вписать
Пишем в техническую поддержку ЯндексаЕсли уверены в качестве своего сайта и конкретно тех страниц, которые не попадают в поиск. У Яндекса довольно большой мануал и огромные список того, «чего не желательно» или вовсе «нельзя». Советуем ознакомиться, перед тем, как строчить кляузу — https://yandex.ru/support/webmaster/yandex-indexing/webmaster-advice.xml
Что можно и где нужно писать, чтобы мне ответили?Итак, вы уверены, что ваш сайт белый и пушистый, поэтому вам срочно нужно написать в Яндекс. Если это действительно так, то:
После чего откроется форма для обратной связи с техподдержкой:
В сообщении можете написать примерно следующий текст (не копируйте его полностью, просто используйте как шаблон )
P.S. Ответ от Яндекса — это просто ошибка инструмента «Проверка URL»Техническая поддержка Яндекса ответила мне на удивление быстро. Оказалось, мои страницы-таки были в поиске — во всём виноват кривой инструмент «Проверить URL». Я.Вебмастер совсем недавно выкатил новую версию этого сервиса — видимо, пока что, не всё работает, как задумано.
Т.е. возможно страницы есть, а может и нет? Чтобы точно убедится в том или ином предположении, нужно проверить наличие в индексе на других сервисах для веб-мастеров.
