Меню

Внимание обнаружена ошибка проверка что вы не робот не была пройдена

DLE FAQ » Все вопросы » Хаки » Не работают комментарии на dle для гостей, как исправить ?


 vectorash  
 03.03.2021  

 Все вопросы » Хаки  
 743

вопрос

При добавлении гостем комментария, выдается вот такая ошибка:

https://prnt.sc/10c0ky5

, «Внимание! Обнаружена ошибка
Проверка, что вы не робот, не была пройдена». На сайте стоит гугл рекапча(функционирует нормально), если выбрать другой способ защиты — такая же ошибка будет

Ответа пока нет


5 комментариев

dj-avtosh

PHP-developer

3121 571956

dj-avtosh 2021-03-033 марта 2021 14:29 — #79216

Здравствуйте. В стандартном шаблоне такая же ошибка?


ЯД: 41001679231462
Заказы в telegram (ремонт модулей, оптимизация нагрузок и т.п.):

@blob42

В телегу писать сразу задачу и бюджет.


vectorash

Юзер

21

vectorash 2021-03-033 марта 2021 18:40 — #79217

да. Так же пробовал менять comments файлы из движка на оригинальные, но ошибка осталась


hippahap

Юзер

22 1

hippahap 2021-03-033 марта 2021 23:10 — #79219

Может код капчи где-то сломан? И данные неправильно передаются, грубо говоря в холостую…


vectorash

Юзер

21

vectorash 2021-03-034 марта 2021 19:05 — #79227

пробовал вместо рекапчи ставить стандартную качпу dle и так же пробовал включать вопрос ответ вместо капчи — ошибка так и осталась


hippahap

Юзер

22 1

hippahap 2021-03-034 марта 2021 23:59 — #79229

скинь в лс сайт — поклацаю, посмотрю


Похожие вопросы

Последние события


  • События
  • Заказы
  • Модули
  • Фото I_SULTAN_I

    I_SULTAN_I
    Что делать если пропала «связь» с css у одной страницы?
    27-01-2023, 22:59


    Разобрался, оставлю тут это для потомков.
    В head при подключении bootstrap с локальной папки необходимо указывать путь в формате:
    <link href=»{THEME}/css/bootstrap.css» type=»text/css» rel=»stylesheet»>
    Вот такой формат пути не работает(точнее работает, но почему-то только для главной страницы):
    <link href=»templates/*your_template*/css/bootstrap.css» type=»text/css» rel=»stylesheet»>

  • Фото I_SULTAN_I

    I_SULTAN_I
    Что делать если пропала «связь» с css у одной страницы?
    27-01-2023, 22:58


    Разобрался, оставлю тут это для потомков.
    В head при подключении bootstrap с локальной папки необходимо указывать путь в формате:

    Вот такой формат пути не работает(точнее работает, но почему-то только для главной страницы):

  • Фото TeraMoune

    TeraMoune
    Как корректно вставить видео вместо изображения в слайдер?
    20-01-2023, 19:38


    нужно добавить проигрыватель? куда именно?

    Куда хотите туда и добавляйте.

    Да и толку, что вам подскажут куда добавить ? Без программирования и скрипта который бы управлял воспроизведением и остановкой видео, магии не будет и красоты тоже. Разве, что просто поставить все видео на цикличность, замутить и установить автовоспроизведения. Но это не правильно и глупо, допускать чтобы в слайдере работали десятки видео одновременно.

    Для просмотра содержимого спойлера, перейдите к выбранному событию.

  • Фото TeraMoune

    TeraMoune
    Как организовать видео-фон на DLE?
    20-01-2023, 19:28


    Это ссылка гугл, то есть намёк идти искать в гугле. Ибо такие вопросы уже тысячу раз обсуждали, подымали, и давали решения. Возьмите теперь и найдите их. Тут никто не будет выполнять функции поисковика за вас.

  • Фото cng

    cng
    Как организовать видео-фон на DLE?
    20-01-2023, 14:38


    добрый день, ссылка не работает, может быть подскажете снова?

  • Фото lutskboy

    lutskboy
    пользователь Информация IP список?
    19-01-2023, 12:18


    всех нет. только последний

  • Фото Snake

    Snake
    У доп поля тип Список в некоторых случаях выводить второе значение
    17-01-2023, 20:38


    Заказ приняли и выполнили, тему можно закрыть или удалить.

  • Фото maks

    maks
    Как вывести через тег custom новости за месяц?
    15-01-2023, 09:22


    Это за последний промежуток времени, а надо за конкретный месяц

  • Фото Slavchik

    Slavchik
    Как вывести через тег custom новости за месяц?
    15-01-2023, 05:39


  • Фото web102

    web102
    Как вывести через тег custom новости БЕЗ категории?
    13-01-2023, 12:42


  • У доп поля тип Список в некоторых… 1
  • DLE 13.2+ модуль вопрос-ответ 3
  • Добавление, редактирование новост… 0
  • DLE 14 + Сторонний php скрипт (+н… 2
  • Редирект для htaccess 0
  • Доработать Yandex Maps 0
  • Требуется кодер 1
  • Темная светлая тема 4
  • Доработка или адаптация модуля по… 15
  • Удаление определенного кэша по кр… 7
  • Постраничная Ajax навигация для т… 0
  • Who rated | Список пользователей … 0
  • Who download | Список пользовател… 0
  • Защищенная ссылка для аттачментов… 0
  • DLE Dynamic xField 0
  • DLE xField Tab PRO 0
  • Адаптация Kylshop 5.3 для DLE 15 9
  • Ajax подгрузка новостей по кнопке… 1
  • Часто используемые значения перек… 8
  • CommentXfields — дополнительные п… 0

DataLife Engine v.13.2 Final Release

Были подготовлены и реализованы следующие изменения:

1. Добавлен мастер переноса адреса вашего сайта с одного домена на другой. Вы можете быстро в один клик сменить имя домена вашего сайта со старого на новый. Данный мастер проведет автоматическую замену вашего домена в публикациях, комментариях, статических страницах, баннерах и аватарах пользователей. Запускается данный мастер в панели управления, в настройках скрипта, рядом с настройкой адреса вашего сайта.

2. Для системы плагинов добавлена возможность указывать исполняемый PHP код, при установке плагина, его обновлении, включении, отключении и удалении. Тем самым плагин при выполнении этих действий может выполнять какие-либо более сложные действия при необходимости.

3. Для системы плагинов добавлена возможность указывать c какого вхождения производить действия с искомыми строками. Например, в файле находится несколько одинаковых строк, и вам необходимо произвести действия только начиная со второй нужной строки, то вы можете это указать в плагине.

4. Для системы плагинов добавлена возможность указывать для плагина обязательное наличие другого плагина. Вы можете в плагине указать имя другого плагина, который должен быть обязательно установлен. При этом данный плагин будет выполнен уже после выполнения основного плагина. Тем самым вы можете создавать дополнения не только для стандартного DLE, но и для плагинов. И создавать плагины для плагинов.

5. Для системы плагинов добавлена корректная работа с переносом на новую строку, в заменяемом коде, если данный перенос стоит в самом начале кода, на который необходимо заменить или который необходимо добавить.

6. Для MySQL запросов, использующихся в плагинах, добавлено использование тега {engine}, который указывает, какой движок MySQL использует DLE при создании таблиц в базе данных. Может принимать значения InnoDB или MyISAM.

7. Внесены изменения в систему установки и включения плагинов, в случаях, когда плагин не соответствует необходимым требованиям. В случаях, когда, например, плагин требует наличие какой-либо версии DLE, а установленная версия DLE не соответствует этому, то плагин все равно будет добавлен на сайт, но при этом будет добавлен в выключенном состоянии. Тем самым пользователь сможет самостоятельно отредактировать в дальнейшем плагин, и внести в него необходимые изменения непосредственно в админпанели. Тоже самое и касается других требований плагина. Включить плагин на сайте можно будет только, если несоответствия требованиям были устранены.

8. Добавлена стандартизация порядка выполнения плагинов в системе. Плагины будут выполняться строго по принципу: первый добавленный в систему, будет выполнен раньше. Выполнение плагинов будет независимо от того, редактировался ли плагин в админпанели или нет. Также если плагин имеет зависимость от другого плагина, то в первую очередь будет выполнен плагин, от которого он зависит.

9. Добавлена поддержка отложенной загрузки изображений в браузер для публикаций. Данная возможность включается в настройках скрипта в панели управления. При включении данной опции, изображения в новостях будут загружаться в браузер не сразу при загрузке страницы, а по мере прокрутки пользователем страницы и непосредственного просмотра данных картинок. Данное нововведение позволяет ускорить загрузку страниц в браузер и снизить расход трафика сервера.

10. Добавлена поддержка reCAPTCHA v3. При использовании данного вида каптчи, вашим пользователям не придется больше выбирать какие-либо картинки, и вообще осуществлять каких-либо дополнительные действия на сайте. Проверка на то робот это или человек осуществляется полностью автоматически в фоновом режиме, незаметно для посетителей вашего сайта. Внимание! При включении данного вида каптчи вам необходимо будет сформировать новые ключи на сайте сервиса Google, непосредственно для reCAPTCHA v3.

11. Для автоматического обновления скрипта добавлена поддержка ручных изменений в файле .htaccess, находящегося в корне сайта. При обновлении данный файл не будет полностью заменен на оригинальный, а в нем будут лишь произведены необходимые изменения в стандартных функциях. Тем самым все ручные изменения, сделанные в нем владельцем сайта, останутся неизменными. Тоже самое осуществляется и для файла крона, который вы настроите для выполнения своих действий по крону.

12. Внесены изменения в работу автоматического обновления скрипта в пределах одной версии. При выходе патчей, исправляющее какие-либо ошибки в пределах одной версии скрипта, будет происходить только установка изменений в виде патча, обновляя только измененные файлы, а не всех файлов целиком, как ранее.

13. Для предварительного просмотра публикаций добавлено автоматическое распознавание выбранной категории, и в случае если для нее назначен отдельный шаблон, то будет загружен тот шаблон для просмотра, который назначен для данной категории. Тем самым если для разных категорий назначены различные шаблоны, то они будут также использоваться и при предварительном просмотре.

14. Для модуля «Перекрестные ссылки» в панели управления скриптом, добавлена возможность использования подсказок для ссылок (атрибут title). Данное нововведение позволяет улучшить SEO оптимизацию сайта, а также более гибко создавать сайты для людей с ограниченными возможностями.

15. Добавлено автоматическое перестроение похожих публикаций для новости в случае ее редактирования. При редактировании новости, для нее будет автоматически произведен поиск похожих новостей. Ранее для повторного поиска похожих публикаций, требовалось сбросить кеш похожих новостей в соответствующем разделе админпанели.

16. Добавлена автоматическая синхронизация закладок пользователей в случае удаления публикации с сайта. Если новость удаляется с сайта, то все для всех пользователей, которые ее добавляли в свои закладки, произойдет автоматическое удаление ее из закладок и синхронизация счетчика закладок у данных пользователей.

17. Добавлена поддержка протокола magnet: для ссылок публикуемых на сайте при помощи BB тегов и в визуальных редакторах.

18. Добавлена поддержка загрузки и обработки изображений в формате WEBP. Теперь изображения в этом формате можно напрямую загружать с использованием DataLife Engine, при этом он будет создавать уменьшенные копии и накладывать водяные знаки, если это необходимо.

19. Добавлена полная поддержка MySQL линейки 8.x.

20. Добавлена полная поддержка PHP линейки 7.3.x.

21. Для тега [ifxfvalue tagname=»tagvalue»] Текст [/ifxfvalue] который выводит текст в случае если значение тега совпадает с указанным значением, добавлена поддержка перечисления нескольких значений через запятую. Например, тег [ifxfvalue gorod=»Москва, Казань, Екатеринбург»] Текст [/ifxfvalue] выведет указанный текст, если дополнительное поле с именем gorod содержит в себе одно из указанных значений. Тем самым значительно упрощается верстка шаблона в различных сценариях.

22. Для системы управления рекламными материалами в админпанели, добавлена возможность поиска по ним. Вы можете осуществлять поиск по названиям, по описаниям и по используемому рекламному коду в них.

23. В админпанели, в разделе управления баннерами, добавлена более информативная визуализация того отображается ли баннер на сайте или нет. Например, если баннер имеет ограничения на показ по времени или по просмотрам, или по кликам, и согласно им, баннер уже отключен от показа, то в разделе редактирования баннеров также будет отображено, что баннер на текущий момент выключен.

24. Добавлена возможность поиска по новостям и статическим страницам на мобильных устройствах (смартфоны, планшеты) в панели управления скриптом.

25. Для расширенного поиска по статическим страницам добавлена возможность выбора области поиска. Вы можете осуществить либо поиск по всем полям, либо отдельно по названию, описанию, и тексту статической страницы.

26. Существенно улучшены алгоритмы поиска по статическим страницам. Благодаря этого поиск по статическим страницам осуществляется более точно, и позволяет более правильно искать необходимые страницы, по заданным критериям поиска.

27. Существенно улучшено быстродействие DataLife Engine и снижена нагрузка на базу данных, при использовании на сайте мультикатегорий. Запросы к базе данных были переписаны таким образом, что больше не используют регулярных выражений при обращении к БД, тем самым было существенно улучшено быстродействие скрипта и снижена нагрузка на сервер.

28. Существенно улучшено быстродействие DataLife Engine и снижена нагрузка на базу данных, при показе публикаций по ключевым словам, из облака тегов.

29. Существенно улучшено быстродействие DataLife Engine и снижена нагрузка на базу данных, при показе публикаций, найденных при использовании дополнительных полей, имеющих свойство «использование как перекрестных ссылок».

30. Для расширенного поиска по новостям и статическим страницам, добавлена возможность быстрого сброса параметров поиска на значения по умолчанию.

31. Лимит на количество символов метатега Description для статических страниц увеличен до 300 символов. Максимальная длина соответствует теперь максимальной длине, установленной поисковой системой Google, для вывода данной информации в результатах поиска.

32. Внесены изменения в механизмы формирования метатега og:image, предназначенного для публикации данный в социальные сети. Теперь, в случае если в публикации стоит уменьшенная копия, то в данном теге будет формироваться ссылка на полное оригинальное изображение, тем самым, социальные сети содержащие ограничения на минимальные размеры картинок, будут получать максимально возможный оригинал изображения.

33. Добавлен контроль неверных ЧПУ при просмотре публикаций на основе каталога по символьному коду, заданному в публикациях. А также улучшен контроль неверных ЧПУ при просмотре полных новостей.

34. Добавлена возможность использования запятых, при написании описаний в дополнительных полях, имеющих тип «изображение» и «галерея изображений».

35. Для дополнительных полей, имеющих тип «Перекрестные ссылки», добавлена возможность использования в значениях символа плюса, например, можно использовать такие значения как C++ и т.д.

36. Для ключевых слов, предназначенных для облака тегов публикаций, добавлена поддержка таких символов как двойные кавычки, плюс, и ряд других. Убраны практически любые ограничения на символы в облаке, оставлены ограничения только на использование HTML кода.

37. Для шаблона RSS потока, добавлена возможность использования HTML форматирования разбитого на несколько строк, использующегося для формирования турбо контента для яндекса.

38. Улучшена обработка изображений в формате PNG в случаях использования некоторых прозрачных изображений. А также улучшено наложение водяных знаков на данные картинки.

39. Добавлена поддержка работы тегов [newscount=X] текст [/newscount] и [not-newscount=X] текст [/not-newscount] для пользовательского вывода публикаций при помощи тега {custom …}, в случаях если этот вывод используется в шаблонах вывода кратких публикаций.

40. Добавлена возможность использования пробелов для разделителей списка перекрестных ссылок в дополнительных полях, если для данных полей включена опция: «Использовать значения полей как перекрестные гиперссылки».

41. Обновлены визуальные редакторы TinyMCE и Froala до актуальных версий. Исправлен ряд выявленных ошибок в данных редакторах.

42. Исправлена проблема, при которой некорректно работала система контроля неверных ЧПУ для дополнительных полей публикаций, имеющих тип перекрестные ссылки, в случае если значения этих полей содержали кавычки.

43. Исправлена проблема, при которой в закладках на сайте могли отображаться отправленные на модерацию публикации.

44. Исправлена проблема, при которой некорректно отображались фигурные скобки в комментариях при использовании на сайте AJAX навигации для комментариев.

45. Исправлена проблема, при которой не все шаблонные теги дополнительных полей публикаций, корректно обрабатывались в шаблоне main.tpl в случае если пользователь переходил на отсутствующую новость.

46. Исправлена проблема, при которой теги {news-id} некорректно обрабатывались при показе публикаций с использованием тега {custom …}, в случае если при этом пользователем просматривалась полная новость.

47. Исправлена проблема с работой тегов [available …] и [not-available …], в случае просмотра пользователем страниц публикаций по символьному коду, если символьный код не указан, либо равен, например, нулю «0».

48. Исправлена проблема, при которой в некоторых случаях мог некорректно работать контроль неверных ЧПУ в полных новостях, в случае если DLE был установлен не в корне сайта, в подпапки.

49. Исправлена проблема, при которой могли выводится новости, при просмотре следующих и предыдущих публикаций, опубликованные на будущее время, несмотря на запрет на их вывод в настройках скрипта.

50. Исправлена проблема, при которой могли не отображаться дополнительные поля, имеющие тип галерея и изображение, при предварительном просмотре публикации, если в данных полях использовались описания к картинкам.

51. Исправлены обнаруженные и заявленные ранее небольшие ошибки в скрипте.

Ссылки для скачивания скрипта для клиентов:

Если вы еще не являетесь нашим клиентом, то вы можете приобрести скрипт на нашем сайте.

Обсудить релиз вы можете на нашем форуме

Откуда взялась CAPTCHA?

Некоторые считают, что c помощью такой капчи Google тренирует ИИ для своих беспилотников

Технология CAPTCHA (сейчас будет страшная расшифровка: Completely Automated Public Turing Test to tell Computers and Humans Apart — «полностью автоматический тест Тьюринга, разделяющий компьютеры и людей») появилась в 2000 году.

Это была первая успешная попытка установить «фейс-контроль» для каждого посетителя сайта. Сетевые боты только начали появляться, но разработчики подготовились с ними сражаться. Бот-системы могли перегружать сайты, делая их недоступными для живых людей. Так, например, на форуме без капчи в начале нулевых можно было автоматически зарегистрировать десятки тысяч фейков и заспамить форум рекламой.

Для борьбы с такими ситуациями в американском Университете Карнеги-Меллона придумали скрипт, который требовал при доступе к сайту ввести символы с трудноразличимой картинки. Для пользователя ребус был несложный: буквы, раскиданные по изображению в хаотичном порядке и искаженные помехами, легко считывались человеком. Зато компьютерные системы распознавания текста терялись. Такой простейший барьер позволил значительно снизить нагрузку на популярные сайты, а также защитить многие порталы от фейковых регистраций и комментариев.

Как CAPTCHA стала полезной

Когда «капчу» стали использовать чересчур часто, сообщество задумалось о более полезном применении технологии. В 2007 году появилась reCAPTCHA, где вместо абстрактных картинок пользователям показывали нераспознанные компьютером слова из сканов архивных выпусков газеты The New York Times.

Аудитория теперь не расшифровывала тарабарщину, а помогала оцифровывать бумажную прессу XX века. Подтвердил, что ты человек, а заодно добавил слово.

Вскоре технологию купила Google и использовала ее для оцифровки книг.

В день пользователи reCAPTCHA помогали распознать сотню миллионов слов.

Боты тоже развивались и научились автоматически распознавать текстовую reCAPTCHA. Тогда Google выпустила принципиально новый алгоритм проверки. Теперь вместо расшифровки слов пользователям предлагали среди девяти картинок найти те, где есть котики, дорожные знаки или, например, бананы. reCAPTCHA вновь стала эффективной, а людям не пришлось ломать глаза в попытке распознать очередное неудачно отсканированное слово из книги.

В самой новой версии reCAPTCHA человеку вообще не нужно напрягаться, достаточно поставить галочку напротив отметки «Я не робот» — алгоритм анализирует движения курсора (бот пойдет по прямому кратчайшему пути) и IP-адрес. До недавних пор reCAPTCHA работала крайне эффективно и почти незаметно для пользователей.

Однажды что-то пошло не так

С первыми ошибками в работе reCAPTCHA столкнулись пользователи смартфонов. Заходишь в строку поиска Google, но вместо результата браузер показывает графическую «капчу». где надо искать объекты на матрице изображений. Причем успешно пройти тест порой было невозможно, reCAPTCHA требовала от пользователя вновь и вновь отмечать картинки.

Вслед за Google проверка пользователя всплыла и на других сайтах. Российский интернет наполнился жалобами на операторов связи, Google и даже Роскомнадзор — пользователей раздражало, что сайты при каждом посещении начали требовать подтверждения человеческой природы.

Первое время никто, включая техподдержку сайтов и провайдеров, не мог внятно ответить на вопрос, что же случилось и как пройти проверку reCAPTCHA. Когда специалисты взялись за изучение проблемы, всплыли сразу несколько причин, по которым сервис проверки на «человечность» начал неистово сбоить.

Итак, почему reCAPTCHA к вам пристает

  • Вы оказались не в том месте не в то время. Защита reCAPTCHA проверяет каждого пользователя по целому ряду параметров. Одним из них является проверка IP-адреса — в базе reCAPTCHA постоянно обновляются адреса, где была зафиксирована подозрительная активность. Это могут быть SEO-боты, нагружающие поисковые системы, спамеры, злоумышленники. При этом сервис блокирует не конкретные адреса, а целые подсети, которые могут включать как сотни, так и многие тысячи IP-адресов.
    В целях разумной экономии провайдеры и операторы мобильной связи выделяют по одному реальному IP-адресу на целую группу своих абонентов. Если среди эксплуатантов этого адреса когда-то попался один бот и адрес был заблокирован reCAPTCHA, то все остальные пользователи этого IP-адреса автоматически оказываются в черном списке на долгое время.
    Так почему в одном месте города смартфон ни разу не попадает на проверку reCAPTCHA, а в другом тест активируется при каждом выходе в интернет? Дело в том, что при перемещении между базовыми станциями сотовой связи телефон попадает в разные подсети и получает новый IP-адрес для выхода в интернет. Уехали в другой район, изменилась базовая станция и IP — смартфон получил незаблокированный в reCAPTCHA адрес. Всё просто.

Какого рода ИИ тренирует Google, когда просит распознать такие картинки?

  • Сервер reCAPTCHA был временно заблокирован в России. В 2018 году reCAPTCHA пала одной из жертв беглого «артиллерийского огня» Роскомнадзора, блокировавшего целые подсети IP-адресов в интернете в погоне за серверами Telegram.
    Жертвой таких ковровых блокировок стали в том числе и серверы reCAPTCHA — сам скрипт на сайтах работал, но связаться с серверами проверки не мог, поэтому reCAPTCHA доводила пользователей до нервного тика, заставляя проходить тест до бесконечности. Со временем серверы reCAPTCHA разблокировали и эта причина перестала быть актуальной.
  • Компьютер генерирует подозрительный трафик. Вполне вероятно, что reCAPTCHA заблокировала именно вас. Источником подозрительного трафика на вашем компьютере могут быть расширения браузера или вирусы. Если вы не используете антивирус, то компьютер мог стать частью ботнета, из-за чего reCAPTCHA и заблокировала ваш адрес.
  • В смартфоне выключен JavaScript. Технология reCAPTCHA на сайтах представляет собой код JavaScript. JavaScript дает большие возможности не только создателям сервисов, но и злоумышленникам, поэтому по умолчанию на многих смартфонах, включая iPhone, в целях безопасности поддержка JavaScript в браузере выключена. В результате reCAPTCHA на телефоне может либо работать с ошибками, либо не работать вовсе.

Капча с картинками стала один из самых любимых мемов в соцсетях

Что делать, если reCAPTCHA вас достала

На компьютере

Бесполезно жаловаться в техподдержку провайдера — провайдер ни при чём и помочь ничем не сможет. Жаловаться в Google, доказывая, что вы не хакер, тоже не стоит. К сожалению, от вашей персональной добропорядочности мало что зависит. Ваш IP-адрес в интернете мог использоваться ботами, поэтому провинились они, а отвечают все пользователи адреса. Если reCAPTCHA буквально не дает нормально пользоваться интернетом, то придется изменить свой IP одним из нескольких способов.

Можно попробовать переподключиться к интернету. Для этого нужно перезагрузить модем или роутер, которому провайдер при повторном подключении может дать новый внешний адрес. Если вы не знаете, как перезапустить оборудование, просто выдерните его из розетки.

Суровые российские капчи тоже могут пугать пользователей

Если этот способ не помог, придется прибегнуть к VPN-сервисам. К сожалению, VPN стоит денег, хотя и небольших. Например, Kaspersky Secure Connection обойдется в 1790 рублей в год. Крупные VPN-сервисы предлагают свои приложения, облегчающие подключение к серверам, поэтому разобраться с ними сможет даже новичок. Что же до вопроса легальности использования VPN в России — если он не предоставляет доступа к заблокированным Роскомнадзором ресурсам, то претензий к такому VPN быть не должно.

Заодно проверьте компьютер хорошим антивирусом, для первого раза будет достаточно даже бесплатной версии, например, Kaspersky Free. Также удостоверьтесь, что все расширения в браузере вам знакомы, среди них нет ничего лишнего и подозрительного.

На смартфоне

Если вы пользователь iPhone, то в первую очередь загляните в Настройки—Safari—Дополнения и проверьте, чтобы JavaScript был включен.

Для смартфонов на Android нужно открыть браузер Chrome, тапнуть справа сверху по меню с тремя точками, перейти в Настройки—Настройки сайтов и там включить JavaScript.

Если не помогло, придется менять свой адрес в интернете. Включите и выключите авиарежим в телефоне — возможно, при перерегистрации в сети смартфон получит новый незаблокированный IP.

Гарантированно выйти из-под блокировки reCAPTCHA можно, подключив телефон к VPN. Для этого в магазине приложений найдите VPN-сервисы с наибольшим числом положительных русскоязычных отзывов. Через мобильное приложение подключение к VPN производится нажатием одной кнопки, но, опять же, за подписку придется заплатить.

Во время загрузки произошла ошибка.

Благодарим за подготовку материала Сергиуса Офицерова, преподавателя Израильской школы IT и безопасности HackerU.

Это тоже интересно:

Нравятся роботы? Узнавайте о них первыми, жмите на кнопку справа

Теперь вы знаете, почему это происходит !!! Если вас все время отвлекают, вот несколько советов, как исправить «Я не робот» в поиске Google.

К сожалению, сильных альтернатив поиску в Google нет. Bing и Yahoo! далеки от ожидаемых результатов и нигде не ближе к точности Google. Итак, попробуйте следующие варианты решения проблемы «Я не робот», даже некоторые моменты не имеют для вас смысла.

Google блокирует результаты поиска на основе исходного IP-адреса. Существует большое количество баз данных, поддерживаемых публичными и частными компаниями для отслеживания подозрительных IP-адресов. Если с вашего IP-адреса происходят какие-либо подозрительные действия и он помечен как спам, Google выдаст сообщение reCAPTCHA и остановит вас для проверки.

Обычно интернет-провайдеры используют динамические IP-адреса с большим диапазоном. Поэтому отключите подключение к Интернету и подключитесь снова, чтобы получить новый IP-адрес. Или просто подождите, а затем попробуйте поискать снова. Возможно, для этого вы можете сбросить модем или маршрутизатор. Если вы хотите сбросить IP-адрес вручную, выполните следующие действия:

Сбросить IP в Mac
Сбросить IP в Mac

2. Проверьте свою сеть

Иногда (в основном в таких странах, как Китай) интернет-провайдер (ISP) маскирует IP-адрес и отслеживает ваши действия в Интернете. Это приведет к тому, что вся сеть IP-адресов, используемых этим интернет-провайдером, будет заблокирована системами безопасности, такими как reCAPTCHA, используемым Google. Если вы сталкиваетесь с CAPTCHA в каждом случае, обратитесь к своему интернет-провайдеру и уточните у него проблему.

Другая проблема с сетью может быть связана с совместным использованием сети Wi-Fi. В этом случае есть вероятность, что кто-то еще в вашей сети может отправлять некоторый автоматический трафик, и Google остановит поиск по всей сети. Вы можете связаться с сетевым администратором, чтобы решить проблему и получить более подробную информацию.

Также вы можете получить уникальный статический IP-адрес от своего интернет-провайдера. Это поможет вам решить проблему со спамом в сети. Узнайте больше о том, как назначить вашему компьютеру статический IP-адрес.

3. Прекратите использовать VPN

Виртуальная частная сеть (или VPN) скрывает ваш IP-адрес и направляет трафик из другого места. Это используется для доступа к заблокированным веб-сайтам, а также используется в основном для сокрытия исходного IP-адреса для совершения незаконных действий. Использование VPN незаконно во многих странах из-за характера использования. Хотя вы можете использовать его в хороших целях, весь сервер не может быть чистым или заблокированным.

Поэтому избегайте использования бесплатных приложений VPN и удаляйте их со своего компьютера. Если вы используете услугу VPN премиум-класса, обсудите это со своим поставщиком услуг VPN и найдите подходящий сервер для правильного подключения. Насколько мы проверили, в большинстве случаев Google показывает, что я не робот, проверяющий reCAPTCHA при подключении через VPN-сервер. Проблема редко возникает при отключении от VPN и использовании общедоступного DNS Google.

4. Избегайте неизвестных прокси-серверов.

Подобно интернет-провайдеру и VPN, прокси-сервер, который вы используете, также может доставить вам проблемы, поскольку через этот прокси-сервер могут быть идентифицированы незаконные действия. Не используйте ненадежные прокси-серверы в своем браузере для маршрутизации всего трафика через них. В Windows 10 вы можете нажать клавишу Windows и перейти к опции «Настройки> Сеть и Интернет». Здесь вы можете отключить все прокси и VPN-соединения. Узнайте больше об изменении сетевых настроек в Windows.

На Mac выполните действия, аналогичные описанным выше, для сброса IP-адреса. На вкладке «Прокси» удалите все прокси-серверы.

5. Используйте Google Public DNS.

Другой проблемой в сети может быть ваш DNS. Система доменных имен или DNS помогает преобразовать числовой IP-адрес веб-сайта в имя хоста. Проблема с DNS может быть связана с настройками вашего компьютера, интернет-провайдером или частным DNS VPN. Хотя поврежденный DNS не вызовет сообщения reCAPTCHA, он замедлит соединение.

Простым решением здесь является переключение DNS на надежный общедоступный DNS. Ознакомьтесь со статьей о том, как использовать общедоступный DNS Google. В большинстве случаев это поможет решить проблемы с подключением к Интернету.

6. Прекратите искать незаконные запросы

Что ж, если вы действительно пытаетесь искать незаконные термины, то, скорее всего, Google остановит вас для проверки. Вы можете очистить кеш своего браузера и повторить поиск. Помните, что Google может легко отслеживать все поисковые запросы с IP-адресов. Таким образом, очистка кеша браузера будет работать только в том случае, если вы случайно что-то искали не так. В противном случае любые поиски, нарушающие условия Google, будут остановлены, и вам придется немного подождать, прежде чем повторить попытку.

7. Уменьшите количество кликов

Если вы не используете VPN, прокси-сервер, ваш IP-адрес и интернет-провайдер в порядке, то наиболее вероятной причиной могут быть необычные щелчки с вашей стороны. Когда вы вводите ключевое слово и очень быстро нажимаете клавишу ввода, Google сопоставит вашу активность с автоматическими ботами и остановит вас.

Хотя это странно, уменьшите скорость и скорость щелчков мыши и используйте обычную скорость, чтобы избежать сообщения CAPTCHA.

8. Остановите отправку автоматических запросов.

Вы можете легко искать термины напрямую, используя URL-адрес, например «https://www.google.com/#q=search-term». Это самый популярный способ отправки трафика в Google автоматическими ботами. Всегда используйте поле поиска для отправки условий запроса и избегайте прямого поиска по URL-адресу.

Если вы разработчик, прекратите манипулировать запросом пользователя перед отправкой в ​​Google. Также отображайте результаты поиска в том виде, в котором они получены от Google, без каких-либо манипуляций.

9. Ищите людей, а не роботов

Опять же, это может вас смутить !!! Но есть много различий между поисковым поведением людей и автоматизированных роботов. Особенно когда вы уже вошли в свою учетную запись Google, Google легко понять, что вы человек. Но этого недостаточно, поскольку сетевые проблемы могут иметь больший приоритет, чем история просмотров учетной записи.

Google reCAPTCHA останавливает ботов и позволяет людям

Например, автоматические боты используют заглавные буквы между словами, в то время как большинство людей не будут искать так. Так что всегда ищите термин, используя способ, которым делают нормальные люди.

10. Проверьте вредоносное ПО и расширения браузера.

Ваш компьютер может быть заражен вредоносным ПО, которое автоматически отправляет трафик в Google. Также некоторые расширения и плагины браузера могут отправлять автоматический трафик. Если вы часто видите сообщение «Я не робот», проверьте свой компьютер на наличие вредоносных программ и удалите ненужные расширения браузера. Попробуйте официальную Инструмент очистки Chrome если вы используете операционную систему Chrome и Windows.

Если вы удалили какое-либо вредоносное ПО, сбросьте настройки браузера до исходных.

Последние мысли

Google остановится с сообщением CAPTCHA только при обнаружении необычной активности трафика. Как только необычная активность будет остановлена, Google позволит вам выполнять поиск в обычном режиме. Так что, если вы часто видите сообщение, значит, что-то не так. Скорее всего, сеть рассылает спам или вы слишком быстро подбираете ботов. Подумайте о том, чтобы тщательно проверить свою сеть, замедлить свои действия и использовать общедоступный DNS, чтобы избавиться от сообщения CAPTCHA «Я не робот». Если у вас все еще есть проблема, опубликуйте ее в официальном Форум поиска Google получить совет экспертов.

Яндекс требует подтвердить что я не робот

КАК ОТКЛЮЧИТЬ «Я НЕ РОБОТ» В ОКНЕ БРАУЗЕРА

Зачастую многие пользователи компьютеров сталкиваются с ситуацией, когда при попытке найти в интернете какую-либо информацию в окне браузера вместо результатов поиска наблюдают картину, предлагающую подтвердить, что они не робот. И для дальнейшего серфинга в интернете несчастным пользователям приходится набирать капчу или пристально вглядываться в размытые картинки, в общем, терять время, чтобы доказать что они не роботы, а просто люди, которым захотелось зайти в интернет. В этой статье я предлагаю разобраться, почему это происходит и как бороться с этой проблемой.

Для тех, кому привычнее смотреть и слушать, чем читать, эта статья размещена на YouTube по этому адресу.

Почему так происходит?

Для начала разберемся, почему это происходит. Во-первых, подобная проблема происходит по причине того, что некоторые поисковые системы взяли на себя ответственность контролировать «поведение» пользователей в интернете. Обычно это делается с целью предотвращения применения специализированных программ, имитирующих действия простых пользователей интернета, посещающих различные сайты.

Во-вторых, подобная ситуация может возникать, когда пользователи интернета чрезмерно часто пользуются услугами различных анонимайзеров, VPN клиентов, а также используют другие уловки, позволяющие скрыть информацию о пользователе интернета или заменить ее на другую (реальную или виртуальную).

В каких браузерах происходит?

Это может происходить в любом браузере, который использует поисковые системы «Google» или «Yandex». Причем, в этом вопросе большую «зловредность» проявляет поисковая система «Google». На Рис.1 представлен внешний вид «проявления недоверия» к пользователю от поисковой системы «Google». На Рис.2 аналогичная ситуация с поисковой системой «Yandex».

На Рис.2 (см.1 Рис.2) показан пример капчи идентификации пользователя интернета в поисковой системе «Yandex». На Рис.3 показан пример идентификации в поисковой системе «Google».

Для борьбы с подобной ситуацией различные пользователи применяют различные способы. Кто-то упорно всматривается в предлагаемый текст или картинку, набирает этот текст или кликает на «правильные» изображения, кто-то борется с этой бедой с помощью специализированных программ, а кто-то просто плюет на эту ситуацию и прекращает попытки найти ответ в интернете на интересующий его вопрос.

А ведь решение данной проблемы предельно просто (по крайней мере, в настоящий момент).

Способы обойти проблему « Я не робот» при поиске информации в интернете

Во-первых, сократите до необходимого минимума применение различных анонимайзеров, VPN клиентов и т.п.

Во-вторых, как отмечалось выше, эта проблема не зависит от применяемого браузера, а зависит только от поисковой системы. Из этого следует – просто перейдите на другую поисковую систему. На настоящий момент самыми надежными и не заангажированными в этом вопросе являются поисковые системы «DucDucGo» «Yahoo» и «Bing». Есть и другие поисковики, которые, в порыве блокировки поискового спама (ручного и машинного), пока что не пытаются издеваться над пользователями интернета, которые по какой-то причине «слишком усиленно» маскируются. Если вы не хотите менять настройки поисковых систем и браузеров на своем компьютере, когда-то выбранные вами, просто установите на панель закладок ваших любимых браузеров ссылки на вышеуказанные поисковые системы. А когда «Google» или «Yandex» потребуют от вас доказательств, что вы не робот, просто откройте любую из этих ссылок и в строке поиска вновь введите свой поисковый запрос.

Я не даю прямые ссылки на указанные поисковые системы, т.к. они (ссылки) периодически могут меняться, а уследить за изменениями довольно сложно, тем более вспомнить, в какой статье и в каком месте эта ссылка применялась. Вы всегда сможете найти эти ссылки в интернете.

В-третьих, если у вас все же есть острая необходимость применения во время поиска в интернете поисковых систем «Google» или «Yandex» (к примеру, вас заблокировали на каком-то сайте), то при поиске используйте не поисковую фразу, а конкретный URL-адрес. «Google», в отличии от «Yandex», это очень любит.

Ну, и в завершение, как я уже говорил выше и в статье «ПРИМЕНЕНИЕ АНОНИМАЙЗЕРОВ И ПОЧЕМУ НЕ СТОИТ ПОЛЬЗОВАТЬСЯ ИХ УСЛУГАМИ», не следует чрезмерно, без всякой надобности пользоваться услугами анонимайзеров, VPN клиентов и т.п. и слишком часто прятаться в интернете. Во-первых, это легко вычисляется. Во-вторых, несмотря на то, что распространители услуг «анонимного серфинга» хором кричат, что их услуги абсолютно безопасны, это далеко не так. Кто может быть уверен в том, что, устанавливая на свой компьютер VPN клиент, вы не ставите вместе с ним и какой-нибудь троян? Кто может быть уверен на 100%, что на серверах анонимайзеров не ведется журнал учета ваших действий через их сервер? И вообще, как вы проверяли надежность компаний, предоставляющих возможность анонимного серфинга?

Существуют и другие способы отключения системы идентификации «Я не робот». Я предложил один из них и, на мой взгляд, самый простой. Не знаю, как долго он будет работать, т.к. в последнее время большинство поисковых систем слишком полюбили «держать руку на пульсе» (точнее на горле) своих пользователей и заставляют их постоянно регистрироваться и выдавать им свою конфиденциальную информацию.

Почему Яндекс стал часто требовать ввести капчу?

текст при наведении

Скорее всего, у Вас в браузере установлено какое то приложение (расширение), которое делает много запросов. Попробуйте отключить все расширения (потом по одному включайте), потом почистить кэш (историю), потом сменить IP, путем отключенияподключения интенрета, лучше — физически выдернуть кабель на время. Это (смена IP) работает только, если у Вас динамический IP (в большинстве случаев так оно и есть).

Чтобы сменился ip — достаточно в модеме нажать «отключить­ «, а потом «подключить­ » )

У меня вот эти просьбы «ввести капчу» даже на чистых браузерах, недавно установленных. Вирусов и троянов вроде нет. Доктором вебом сканирую. Не знаю, что за нововведение такое, достало уже. — 7 лет назад

Сразу хотим сказать, если у вас статистический модем, то сменить ваш IP адрес не получится, так как он не меняется, а вот с динамическим IP адресом, все обстоит намного проще, так как он меняет IP адрес.

  1. Поисковик Яндекс стал часто требовать от вас ввод капчи, потому что вами было слишком много отправлено запросов и система для своей подстраховки, подумала, что вы можете оказаться ботом, то есть роботом.
  2. Поисковик Яндекс пытается вас идентифицировать вас, как живого и настоящего пользователя, который в отличии от бота (робота) сможет ввести правильно капчу — символы на латинице.
  3. Если вам надоедает вводить капчу, то при динамическом IP адресе, сы можете перезагрузить свой модем, и на какое-то время избавите себя от ввода капчи.

У меня также выскакивает эта страничка Яндекса, но не так часто, как пишете вы. В основном это происходит когда по долгу службы на Большой вопросе мне приходится перебирать много поисковых страниц, и наверное со стороны действительно может показаться, что я слишком много делаю поисковых запросов. Тогда выскакивает эта просьба о капче и подтверждении своего биологического статуса. Как правило второй раз в день эта просьба уже не появляется.

И когда я мало пользуюсь поисковиком также не выскакивает. Хотя у меня стоит и блокировщик рекламы и динамический адрес.

Переходить на Гугл из-за этого смысла не вижу, по многим параметрам Гугл проигрывает Яндексу и пользоваться им не удобно.

Как убрать капчу в Яндексе?

В последнее время, некоторые пользователи стали жаловаться на то, что поисковик Яндекс мучает их постоянным вводом текста с картинки. Страничка, с красноречивым названием «ОЙ», появляется каждый раз, как только Вы пытаетесь воспользоваться поиском. А на самой страничке, для продолжения требуется ввести символы, изображенные на картинке. Поисковая система таким образом проверяет человек ли это, или программа бот, которая отправляет автоматические запросы. Но вот какая проблема, Вы вполне себя чувствуете человеком и поисковые запросы отправляете довольно человеческие и совсем не в автоматическом режиме, а Яндекс все продолжает устраивать проверки. В чем причина, почему приходится каждый раз сталкиваться с этим?

Что делать, если Яндекс постоянно просит ввести капчу?

Если столкнулись с подобной проблемой, то это связанно с тем, что поисковая система заметила подозрительную активность с Вашего компьютера. Эта активность так или иначе связанна с поисковыми запросами в данной системе. Источником подобной активности, в первую очередь, являются различные программы. Поэтому необходимо сосредоточить все свои усилия на поиск приложения, которое так портит серфинг в интернете.

Стоит отметить, что есть много программ с таким поведением которые являются вредоносными, то есть вирусами. Так что если столкнетесь с капчей Яндекса, то в первую очередь выполните полное сканирование компьютера на наличие вирусов. Лучше всего это выполнить несколькими разными антивирусными утилитами. Если будут обнаружены на компьютере вирусы и будет выполнено их успешное удаление, то скорее всего, при работе с поисковиком капча Вас больше не побеспокоит. Но что делать, если антивирус ничего не нашел? Значит, где-то на компьютере, затаилась вполне легальная программка, которая, однако, вредит своей деятельностью.

Откройте свой браузер, посмотрите на него внимательно. Возможно на нем установлены дополнения, которые могут оказывать негативное действие, при работе с Яндексом. Многие, кто пользуется «Хромом», ставят довольно популярное расширение для блокировки рекламы — AdBlock. На первый взгляд оно вполне безобидное и даже полезное. Но такое расширение может конфликтовать с поисковыми системами, которые тут же реагируют и перенаправляют на страницу с капчей. Если постоянно сталкиваетесь с подобной проблемой, то просто отключите данное расширение и страница с капчей больше не потревожит Вас.

Есть множество и других расширений, способных так навредить. Среди которых можно найти известный для многих RDS бар. Довольно полезная штука, но в связи стем, что он постоянно отправляет запросы на страницу, можно столкнуться с необходимость каждый раз вводить символы с картинки. Если все время появляется капча, то следует сразу принимать меры. Иначе есть риск быть заблокированным поисковой системой, что будет очень неприятно. В любом случае, придется делать выбор между приложением, которое мешает работать и удобством времяпровождения в интернете. Конечно же, лучшим выбором будет удаление такого приложения. Появление капчи это как знак того, что какая-то программа начала выполнять лишние запросы в интернете. Так что можете смело расставаться виновником, выполнив его удаление, или хотя бы отключив.

Капча (CAPTCHA), требующая доказать, что «Я не робот», появляется на все большем количестве сайтов и сервисов, и раздражает пользователей. Есть несколько причин, из-за которых сайты принимают посетителей за ботов и требуют введения проверочным символов. Можно ли избавиться от повторяющейся проверки, что нужно изменить в настройках браузера и странице во «Вконтакте», как обойти капчу с помощью VPN-сервисов?

Что такое капча?

CAPTCHA — автоматизированный публичный тест Тьюринга. Он
позволяет определить бота среди посетителей сайтов. Механизм защиты
веб-сервисов от спама разработала в 2000 году команда университета
Карнеги — Меллон. Идея теста в том, что предложенное задание легко
выполняется людьми, но недоступно для машин.

Чаще всего пользователям нужно ввести символы с картинки.
Они изображены с помехами, или полупрозрачны, чтобы машина не могла их распознать.
Изначально система хорошо работала, снизила нагрузку на сайты, избавила их от
фальшивых комментариев.

Фото: © Sibnet.ru

Через семь лет после создания теста Тьюринга появилась модификация
— reCAPTCHA. Людям предложили
распознавать слова отсканированных выпусков газеты The New York Times. Защита
от спама одновременно помогала оцифровывать издание.

Но компьютеры становились все мощнее и стали способны
распознать символы. Поэтому появились другие варианты: поиск кошек, дорожных
знаков на картинках или галочка напротив фразы «Я не робот».

Полезный для администрации сайтов тест стал раздражать
пользователей. Иногда приходится вводить капчу по несколько раз, чтобы увидеть
какую-то страницу. Отдельной проблемой становится капча во «ВКонтакте».

Фото: © Sibnet.ru

Существует несколько причин, по которым пользователю
приходится постоянно доказывать, что он не робот. Даже если человек не спамит,
а просто оставляет комментарии или общается в соцсетях, его может преследовать
ввод символов.

Подозрительный трафик с компьютера. Расширения браузера или
вирусы на устройстве юзера могут стать частью сети ботов. За это reCAPTCHA
блокирует его IP-адрес.

Плохая компания.Провайдеры выделяют для группы абонентов
один реальный IP. Поэтому если один из них бот, его блокируют, и вся группа
попадает в чёрный список.

Выключение JavaScript на смартфоне. Механизм reCAPTCHA — код
JavaScript на сайте. Кодами пользуются не только сервисы, но и мошенники,
поэтому в смартфонах для безопасности в браузерах отключен JavaScript. Это
приводит к тому, что reCAPTCHA работает со сбоями.

Как избавиться от капчи

Изменение настроек

Пользователи Google Chrome могут избавиться от
надоедливой защиты, отключив ряд расширений. Блокирующее рекламу расширение
AdBlock или плагин RDS Bar часто приводят к появлению капчи.

Еще один вариант для компьютеров — заново подключиться
к интернету. После перезагрузки модема или роутера юзер может получить
новый внешний адрес, и избавиться от назойливой проверки.

Владельцы iPhone могут в разделе настроек Safari открыть
вкладку «Дополнения» и включить JavaScript. Пользователям Android в
Chrome, нужно нажать на меню с тремя точками, перейти в «Настройки»,
открыть «Настройки сайтов» и также активировать JavaScript. Еще один
вариант для мобильных — ненадолго включить авиарежим, после которого смартфон
перерегистрируют в сети, и сможет получить незапятнанный IP.

Избавиться от капчи «ВКонтакте» можно за несколько минут. В
настройках страницы надо перейти в раздел «Безопасность», нажать на «Показать
историю активности». Всплывшее окно покажет историю посещений сайта и IP, с
которого осуществлялся вход.

Если в списке адрес, который отличается от адреса
пользователя, нужно нажать «Завершить все сеансы». А затем сменить пароль.
Кроме того, капча появляется реже, если страница привязана к номеру телефона.

Фото: © Sibnet.ru

Специальные сервисы

Если капчу вводить лень даже изредка, это за плату сделают другие юзеры.
На специализированных веб-сервисах возьмут примерно 40 рублей за разгадывание
тысячи картинок. Пользователь же получит специальный ключ, позволяющий ему
забыть о надоедливом тесте.

Динамический IP

Если колдовство с настройками не помогло, придётся
воспользоваться сервисами VPN. Крупные
компании оказывают эту услугу платно. Но есть и бесплатные сервисы с хорошим
интерфейсом и удобные в эксплуатации. Например, программа CyberGhost VPN (скачать бесплатно >>).

Сервис работает с всеми популярными браузерами, отлично
защищен благодаря протоколу OpenVPN с 256-битным шифрованием AES. Бесплатно
можно запускать только на одном устройстве.
Пользователь получит доступ к 37 серверам в 12 странах, работает без
перерыва около трех часов, после этого надо снова подключит и продолжить
работу.

Читайте также: Как работает режим невидимки в браузерах >>

Проблемы с капчей - Я не робот

Капча (Рекапча, Recaptcha) — сервис защиты веб-страниц от автоматизированного спама. На смену обычной капчи, где пользователю нужно было вводить точную последовательность каких-то символов, пришла новая технология в виде учёта правильности действий, совершаемых кликами. Нам нужно убедиться, что вы не робот.

С усложением технологий пришли новые проблемы, и начались они конечно не у роботов, а у пользователей. Вдобавок сам сервис гугловской рекапчи так устроен, что он после ряда каких-то действий (подозреваемо автоматических) может либо выдавать бесконечные задания (например, разгадывание витрин или дорог), либо просто надпись:

«Похоже, что ваш компьютер или сеть отправляют автоматические запросы. В целях безопасности пользователей мы вынуждены отклонить ваш запрос.»

Пользователи с ограниченными зрительными функциями так же жалуются на звуковую рекапчу, которую трудно разобрать среди паразитных шумов. Качпа распространена повсеместно, и в бан можно попасть не только в продуктах Google, но и в Стим (Steam), например или Cloudflare.

Несколько советов тем, кто столкнулся с банами в Recaptcha

Разумеется, если вы занимались парсингом данных, например, с Поиска, то должны понимать, за что вам Гугл влепил рекапчу и предупреждение (тоже самое с Гугл Поиска и с Яндекс Поиска).

Если вы невиновный пользователь, то:
1. Проверьте браузер. Удалите вредоносные дополнения и плагины. Статья про оптимизацию Гугл Хром. Обязательно попробуйте в режиме Инкогнито! Естественно попытайте счастья в других браузерах: Firefox, Opera, Яндекс браузер. На этом этапе нужно точно убедиться, что проблема НЕ в браузере, иначе остальные шаги не имеют смысла.

2. Проверьте компьютер. Всевозможные антивирусы вам в помощь. Естественно, нужно будет посмотреть, если проблема с рекапчей на других компьютерах или устройствах в вашей домашней сети. Опять же, тут тоже нужно точно знать, что дело не в компьютере. Если он в фоне отправляет запросы в Гугл, вы так и будете сидеть в бане до третьего пришествия. Возможно стоит скачать фаерволл или другое ПО для логирования запросов с компьютера. Телефон тут тоже не исключение — он вполне может нахвать всякой дряни, потому что Андроид весьма дыряв. Лучше ситуация у айфонов. Кстати, довольно редкий случай, но роутеры тоже подвержены взломам и последующей «вирусификации». Вообще стоит зайти в роутер (домашний маршрутизатор) и посмотреть системный журнал на наличие подозрительных действий. Не забудьте, что новые прошивки роутера вероятно устранят найденные разработчиками уязвимости, а так же активация встроенного фаерволла и закрытие доступа извне. Есть смысл протестировать подключение без роутера (вдруг изделие «мейд ин чайна» делает какие-то автозапросы?).

3. Очень важный пункт — ваш интернет. Если у вас один ip на 200 пользователей, то неудивительно, что один спамер может всех абонентов на этом адресе подвести к бану. Здесь вам нужно попробовать свое устройство на другом интернете и посмотреть, блокирует ли капча. Если нет, то причина очевидна — нужно обращаться к провайдеру. Вы так же можете почитать темы и пообщаться с другими абонентами на форуме провайдера (Поиск Гугл вам в помощь). Если у вас динамический ip (непостоянный), то перезагрузка роутера может спровоцировать смену ip и решить проблему. Однако если ваш провайдер выдаёт адреса на длительный срок, то это не поможет.

  • Как узнать свой ip адрес.
  • Проверить свой ip адрес в спам-базах.

4. Выделенный ip. Он стоит отдельных денег :-), но тогда вы будете независимы от потенциальных спамеров (автор статьи платит в месяц дополнительных 100 рублей за выделенный адрес, чтобы избежать бана в капчах и других сервисах) . Для примера: проблема с Sony Playstation и PS Network (если вы думаете, что только в гугловской рекапче можно попасть в бан из-за спамеров, то сильно ошибаетесь) из-за общего или динамического айпи-адреса.

5. Параллельно вышеприведённым шагам попробуйте другой аккаунт Google. Разумеется, это не панацея, и если у вас есть фоновые запросы в сети Гугла, рекапча появится снова, а за ней и последующий бан.

6. Обратитесь к своему интернет-провайдеру. Он может сделать запрос в Google для разблокировки проблемных IP-адресов.

О поддержке Рекапчи

И хотя таковая у рекапчи имеется, пользователи сообщают о «нулевом эффекте» после обращений. Тут сложно что-либо сказать. Перед отправкой своего ip в на email поддержки нужно точно знать, что вы действительно не посылаете в сеть спамные автоматические запросы.

10 основных причин, по которым страница сайта может не находиться в индексе поисковых систем Яндекс или Google

Причина номер 1. Новая страница или новый сайт

Первая причина, это то, что поисковые роботы еще просто не нашли новую страницу вашего сайта. В зависимости от того, какой ваш сайт, переобход страниц может занимать от нескольких минут до нескольких недель.

Чтобы узнать, находится ли в индексе страница Вам необходимо воспользоваться сервисами вебмастера Яндекс или Google Search Console.

В Яндекс.Вебмастере это раздел «Индексирование» — «Проверить статус URL». Если робот обошел и проиндексировал страницу, вы увидите уведомление «Страница обходится роботом и находится в поиске».

Если робот о странице еще не знает, вы увидите сообщение «Страница неизвестна роботу».

Яндекс.Вебмастер

В новой версии Google Search Console вам нужен инструмент «Проверка URL». Если робот обошел и проиндексировал страницу, вы увидите уведомление «URL есть в индексе Google».

Google Search Console

Google Search Console

Google Search Console

Если робот на странице еще не был, вы увидите сообщение «URL нет в индексе Google».

Причина номер 2. Страница или сайт закрыты от индексации в файле robots.txt

Существует специальный файл robots.txt, который позволяет указать роботам на то, какие страницы сайта должны быть в индексе поисковых систем, а какие страницы не должны быть включены.

Соответственно, если в файле прописаны запрещающие правила, в индексе поисковых систем данную страницу вы не найдете.

Как проверить, закрыта ли страница в robots.txt?

В Яндекс.Вебмастере: заходим в «Инструменты — Анализ файла robots.txt». В окно «Разрешены ли URL» вносим адреса страниц, которые мы хотим проверить. После того, как мы нажмем на кнопку «Проверить», внизу появится список введенных адресов и их статус: разрешены они для индексации или нет. Если нет, будет указано, какое из правил запрещает обход для робота.

В Google похожий инструмент находится на вкладке «Сканирование — Инструмент проверки файла robots.txt».

Важно! На данный момент эта вкладка находится в старой версии вебмастера!

Причина номер 3. Указан запрет в User-Agent

У поисковых систем есть свои требования к тому, как должен строиться файл robots.txt. И начинается он с приветствия. Приветствие может быть обращено к роботу яндекс, либо гугл, либо к обеим поисковым системам.

Часто для Яндекс и Google делают отдельные секции в файле robots.txt. А потом забывают вносить правки в эти секции. Из-за этого роботы потом некорректно начинают индексировать сайт.

robots.txt

Проверяем наличие проблемы также, как и в предыдущем случае. Главное — это делать в вебмастере Яндекс, и в вебмастере Google.

Причина номер 4. Запрет на индексацию страниц указан в мета-теге robots.

Суть этого мета-тега такая же, как и у файла robots.txt, только если страница закрыта в robots.txt она все равно может быть проиндексирована поисковыми системами. Но если на странице используется noindex или none, страница не будет добавлена в индекс.

1. Проверить использование данного мета-тега на странице можно в коде (сочетание клавиш Ctrl+U)

2. С помощью дополнения для браузера, например seo meta

3. С помощью вебмастеров.

Проверить статус URL

Причина номер 5. Некорректно настроенный атрибут rel=canonical.

Каноникал — это еще один атрибут, помогающий управлять индексацией страниц.

Если rel каноникал настроен на другую страницу, то вы говорите поисковому роботу о том, что она схожа с другой станицей и первую страницу не нужно добавлять в индекс поисковых систем.

Проверить использование данного атрибута можно также в исходном коде, с помощью дополнения для браузера — rds бар или seo meta.

Также это можно увидеть в вебмастере Яндекс («Страницы в поиске»- «Исключенные страницы». Проверять необходимо статус «неканонические»).

Причина номер 6. Проблемы с ответом сервера

Для того, чтобы страница индексировалась, ее код ответа сервера должен быть 200 ОК. Если страница отдает ответ сервера 404 или 301, в индекс поисковых систем данная страница не попадет.

Проверять код ответа лучше всего с помощью вебмастеров, они показывают наиболее точные данные. А вот визуальной проверкой лучше не ограничиваться, так как бывают случаи, когда страницы выглядят корректно, но код ответа сервера не 200.

Причина номер 7. Проблемы с хостингом или сервером

Представьте, вы приходите в магазин, а он не работает. Потом снова приходите в магазин, но он все равно не работает. Какова вероятность того, что вы вернетесь туда? Вероятнее всего очень маленькая.

Тоже самое происходит и с поисковыми системами. Если он приходит на ваш сайт, а он не работает, то робот просто исключает страницы из индекса и не показывает их пользователям. 

Правильно, зачем пользователей приводить на неработающий сайт.

Для того, чтобы отследить есть ли проблема, необходимо в вебмастерах проверять статус страниц. Если встречаются ошибки сервера 5хх (500, 503), а также если вам приходят уведомления из Яндекс.Метрики о том, что сайт не работает, необходимо решать данную проблему.

Причина номер 8. Проблемы со скоростью загрузки страниц

Скорость загрузки — важный показатель качества современного сайта. Если ваши страницы долго долго загружаются, роботы поисковых систем исключать такие страницы из индекса.

Кроме того, скорость загрузки страниц — является фактором ранжирования в поисковых системах. Поэтому, если у вас с этим есть проблемы, срочно это исправляйте!

Как проверить? Начните с инструмента PageSpeed Insights от Google. Дополнительно можете использовать сервисы Google Аналитика и Яндекс.Метрика.

Совет! Важно проверять скорость загрузки для нескольких типов страниц и не останавливаться выполнив только одну проверку, т.е. выполнять данные работы периодически.

Причина номер 9. Проблема с уникальностью и полезностью контента

Поисковики уделяют большое внимание качеству контента, поэтому, если на странице расположен не полезный контент, либо же дублирующийся с другими страницами, такие страницы не добавляются в индекс поисковых систем.

Как проверить, есть ли на сайте такие страницы — нужно зайти в вебмастер.

В Яндексе — это отчет «Страницы в поиске» — «Исключенные страницы». Проверять нужно статусы «Дубль» и «Недостаточно качественная».

В Google Search Console — это отчет «Покрытие» — «Страница является копией. Канонический вариант не выбран пользователем».

Google Search Console

Причина номер 10. Проблемы с AJAX

Если ваш сайт выполнен на технологии AJAX очень важно правильно выполнить требования поисковых систем, для того чтобы поисковые роботы смогли проиндексировать страницы вашего сайта.

Таким образом для каждой отдельной страницы должна быть своя HTML-версия.

И напоследок, дадим вам несколько советов, как ускорить индексацию:

  • отправляйте страницы на переобход с помощью вебмастеров
  • используйте файл sitemap.xml
  • используйте новейшие возможности, которые предоставляют вам поисковики. Например, Яндекс Метрике появилась возможность связать Яндекс Вебмастер и Яндекс Метрику, для того чтобы отправлять страницы на переиндексацию.

Также смотрите наш видеоролик https://youtu.be/HF-2dd4luQY с помощью которого вы сможете найти ошибки у себя на сайте и запланировать работы по их исправлению. 

Если вы хотите продвинуть свой сайт в ТОП поисковой выдачи, тогда записывайтесь на  курс по SEO-продвижению http://m.webcom.by/5tsCcgVO

«Профессиональный курс по SEO»

Google Search Console

Начало:

Google Search Console

Свободных
мест: 3

www.webcom-academy.by

Решение проблем индексации. Блог LeSEO.RU

Автор: Lee. 2014 год.
7 895 посещение

Всем приветик. Неожиданно для себя столкнулся с проблемой индексации страниц моего блога. Долго не заходил в ГоГетЛинкс, а когда зашел оказалось, что 4 обзора до сих пор не проиндексировано и осталось всего 14 дней. Ну я как обычно взял и прогнал эти урлы по своим твиттер аккаунтам. Это всегда помогало при проблеме с индексацией. Но в этот раз этого оказалось недостаточно. Поэтому я решил рассказать читателям о том, как я боролся за добавление позабытых страничек в индекс.

Сразу отмечу, что если апа не случится завтра с утра, то моя 100% индексация снизится на несколько пунктов. Уже не так красиво будет выглядеть. Но как бы то ни было…

Итак, как я боролся за свой индекс. С удивлением узнал, что в webmaster.yandex.ru добавили новый сервис «Проверить URL» Там можно проверить конкретный адрес сайта который не индексируется. Ключевой момент заключается в том, что высвечивается конкретный статус странички. Всего их пять:

  1. В данный момент адрес страницы неизвестен роботу — то есть робот еще ни разу не заходил на сайт
  2. Адрес страницы уже известен роботу, но в данный момент контент страницы ещё не проиндексирован. Это значит, что скорее всего, ваша страничка появится в индексе в следующий апдейт
  3. Страница была проиндексирована роботом и присутствует в поиске. Ну здесь все понятно
  4. Страница обходится роботом, но отсутствует в поиске. Скорее всего проблема технического плана запрет в роботсе, мета роботсе и т.п.
  5. Страница обходится роботом, но отсутствует в поиске, поскольку дублирует уже имеющиеся на вашем сайте страницы. А этот пункт уже указывает на то, что страничка дублирует уже имеющиеся аналоги.

Как яя уже говорил, 4 пункт это технические запреты. Здесь самое важное — отсутствие запрета на индексацию сайта. Если написать в файле robots.txt «Disallow: /», поисковые системы не будут индексировать сайт, т.к. вы запретили им это делать (disallow — запретить, / — корневой каталог). Проверьте этот файл. Если запреты отсутствуют, подумайте, нужно ли вам абсолютно все в выдаче — как правило, имеются и «мусорные» (или системные) страницы. Их лучше запретить. Также нужно проверить, нет ли у вас meta-тега robots — он тоже влияет на индексацию.

Следующий пункт — поисковик должен знать URL-адрес страницы. Уведомить поисковую систему о таком адресе можно, нужно воспользоваться страницами с добавлением адреса в очередь на индексацию (вебмастера такие страницы называют «аддурилками», от английских add и url — аддурл). Впрочем, для Яндекса лучше всего купить одну-две ссылки со страниц, уже известных поисковику. Дело в том, что аддурилка этой поисковой машины работает достаточно медленно.

Почитайте связанные посты:

Опубликовано в рубрике: Поисковые системы


Биржа контента CM

leseo.ru

Основы внутренней оптимизации-индексация страниц сайта

(Последнее обновление: 15.04.2019)

Osnovy-vnutrennej-optimizacii-sajtaOsnovy-vnutrennej-optimizacii-sajtaПривет, дамы и господа! Определенную роль во внутренней оптимизации играют факторы, никак не связанные с контентом (назовем их неконтентными факторами). Одним из таких факторов является корректная индексация страниц сайта.

Необходимыми (но недостаточными!) условиями для попадания страницы в индекс являются следующие:

1. значение HTTP-статуса страницы, отдаваемого индексирующему роботу поисковой машины, должно иметь значение 200 ОК;
2. отсутствие запрета на индексацию данной страницы;
3. URL страницы должен быть известен поисковой машине.

Проверить HTTP-статус страницы «глазами» индексирующего робота и отсутствие запрета на ее индексацию в файле robots.txt можно в разделе «Проверка ответа сервера» Яндекс.Вебмастера, причем эта проверка производится только для тех сайтов, права на которые подтверждены в вашем аккаунте. В Инструментах для вебмастера Google для того, чтобы проверить, доступна ли конкретная страница сайта для индексации, можно воспользоваться режимом «Посмотреть как Googlebot» в разделе «Содержимое сайта». Запретить индексацию страницы можно несколькими способами:

1. с помощью файла robots.txt
2. с помощью специальных директив в HTML-тегах в коде страницы
3. изменяя настройки инструмента «Параметры URL» в разделе «Сканирование» Инструментов для вебмастера Google.

В файле robots.txt это можно сделать с помощью директив Disallow и Clean-param. Достаточно подробную справку по правилам составления файла robots.txt можно найти в разделе «Использование robots.txt» Помощи вебмастеру Яндекса и в разделе «Блокировка URL при помощи файла robots.txt» Справки Google.

Проверить корректность файла robots.txt можно в разделе «Анализ robots.txt» кабинета вебмастера Яндекса (причем, это можно сделать для любого сайта, а не только для тех, на которые подтверждены права) и в разделе «Инструмент проверки файла robots.txt» Инструментов для вебмастера Google (только для сайтов с подтвержденными правами).

К директивам, c помощью которых можно запрещать страницу к индексации, относятся мета-тег robots и атрибут rel=»canonical» тега . Справочную информацию по их использованию можно найти на страницах Помощи Яндекса и Справки Google. Справку по работе с инструментом «Параметры URL» раздела «Сканирование» Инструментов для вебмастера Google можно найти на странице https://support.google.com/webmasters/answer/1235687?hl=ru.

GoogleGoogle

Инструментов для вебмастера Google

Для того, чтобы индексирующий робот нашел данную страницу, достаточно одной ссылки на неё со станицы, которая уже есть в индексе поисковика. Также о новых страницах на сайте можно сообщать поисковой машине с помощью файла Sitemap (справочную информацию по нему можно найти в Помощи Яндекса и Справке Google).

Но даже, если робот узнает о странице и посетит ее, то еще не факт, что она попадет в индекс. Проверить, знает ли индексатор Яндекса о конкретной странице, и включена ли она в поисковую базу, можно в разделе «Проверить URL» Кабинета вебмастера Яндекса. Есть несколько вариантов ответов:

1. В данный момент адрес страницы неизвестен роботу
2. Адрес страницы уже известен роботу, но в данный момент контент страницы ещё не проиндексирован.
3. Страница была проиндексирована роботом и присутствует в поиске
4. Страница обходится роботом, но отсутствует в поиске
5. Страница обходится роботом, но отсутствует в поиске, поскольку дублирует уже имеющиеся на вашем сайте страницы.

Первый вариант ответа говорит нам о том, что, во-первых, у индексатора нет информации о том, что данная страница существует. Поэтому необходимо убедиться, что поисковый робот видит данную страницу, и она отдает ему отклик 200 указанным выше способом, а также разместить ссылку на нее на какой-либо странице, уже ранее проиндексированной поисковой машиной. Также для того, чтобы сообщить о странице индексирующему роботу, SEO-специалисты используют размещение ссылок на нее в Твиттере. Более того, до недавнего времени информирование индексатора о новой странице через Твиттер считалось SEO-специалистами наиболее быстрым и надежным способом, позволяющим обеспечить попадание страницы в поисковый индекс Яндекса буквально за считанные дни. Однако в последнее время в профессиональных дискуссиях все чаще появляются сообщения, что этот способ перестает работать. Возможно, виной тому стали промышленные способы эксплуатации данного способа «загона страниц в индекс», и Яндексом были повышены требования к характеристикам аккаунтов, информацию из которых следует учитывать при поиске новых страниц. Также первый вариант ответа может возникать в случаях, когда страница запрещена к индексации в файле robots.txt.

Однако основную проблему, связанную с индексацией, составляют варианты 4 и 5, когда индексирующий робот обходит страницу, но не включает ее в поисковый индекс. Это может быть связано, как с техническими параметрами страницы, такими как запрет к индексации с помощью мета-тега noindex или атрибута rel=»canonical» тега . Но может иметь место и классификация алгоритмом данной страницы, как не имеющей достаточно ценного содержания. В таком случае говорят, что страница попадает в «скрытый индекс». Как с этим бороться?

Во-первых, страница может быть признана полным или нечетким (частичным) дубликатом уже имеющейся в индексе страницы (вариант ответа номер 5). Такое часто случается с однотипными страницами (например, номенклатурными единицами каталога продукции), которые отличаются друг от друга лишь незначительным по удельному объему текстом. В этом случае, необходимо повышать удельную долю уникального текста на страницах – расширять индивидуальное описание и по возможности закрывать от индексации текстовые элементы, общие для всех страниц данного типа (например, пункты меню, новостную ленту, фрагменты «шапки», «подвала» и т.п.)

Во-вторых, страница может иметь недостаточное количество статического веса. Например, она имеет достаточно глубокий уровень вложенности и имеет при этом сравнительное небольшое количество внутренних ссылок. Здесь можно посоветовать оптимизировать структуру сайта, уменьшая уровень вложенности информативных страниц, и плотнее их перелинковывая друг с другом. Также можно посоветовать использовать внешние ссылки с других сайтов.

В-третьих, сам сайт может иметь достаточно низкий уровень авторитетности в глазах поисковой машины. Неуникальный контент, примитивный дизайн, слабая посещаемость, малое количество внешних входящих ссылок, с таких же малоавторитетных ресурсов, злоупотребление платными ссылками и рекламой – вот типичный портрет целевой аудитории алгоритма серии АГС (подробнее смотри в моей статье https://www.searchengines.ru/articles/sergey_lyudkevich.html), который методично отправляет целые сайты в скрытый индекс.

Резюмируя, можно отметить, что проблема индексации сайта, конечно же, является не самой сложной из проблем современного SEO. Как правило, достаточно овладеть базовым справочным материалом по теме и тщательно следовать его рекомендациям. Однако с пренебрежением относиться к данному вопросу тоже не стоит, дабы неожиданно не столкнуться с неприятностями, которые могут существенно затормозить продвижение сайта.

Sergej-LjudkevichSergej-LjudkevichАвтор: Сергей Людкевич — ведущий аналитик проекта «Поисковая Аналитика», cупермодератор форума о поисковых системах Searchengines.ru. Сфера профессиональных интересов — исследование алгоритмов ранжирования поисковых машин, разработка методик поискового продвижения сайтов.

Источник: searchengines.ru

wordpressmania.ru

страница обходится роботом но отсутствует в поиске

Добрый день!

Раньше постоянно сталкивался со следующей ситуацией. Пишу новый текст, все как положено, по ключевым запросам, но при добавлении в индекс Яндекса, страница не заносится в базу данных поиска(ПС). То есть фактически происходит следующее, вставляем текст на сайт, заносим в ПС через службу вебмастер яши. Через десять минут робот яндекса проходит по странице, текст сразу влетает в индекс, но в базе ПС его нет ни на следующий день, ни через месяц.
 

Как проверить?

Вбиваете ключевую фразу вашего текста в ПС яндекса. Страница должна появиться в ПС в топ пятьдесять приблизительно через один день. Если его там нет, значит, и в базе ПС вашего текста тоже нет. Да и не имеет никакого смысла писать текст, чтобы он появился в ПС на сто двадцатом или двести сороковом месте.

Обычно пользователи, в большинстве своем, дальше третьей или четвертой страницы ПС не просматривают.
 

А как проверить, что новый текст на сайте проиндексирован и проверен роботом?

Достаточно, вбить в ПС адрес вашей страницы, который вы хотите проверить. Url сайта появился, значит ваша статья  проиндексирована. А то, что в базе ПС его нет, тут уже может быть масса причин.
 

1. Ваша статья или содержимого текста, по мнению яндекса не является чем-то уникальным, и является копипастом или рерайтом другого текста, который уже был опубликован задолго до появления вашей статьи.

2. Возможно, вы совершили элементарные ошибки и не проставили теги title, description, keywords. Хотя по заверениям многих теги description, keywords не играют никакой роли, служба вебмастера строго требует, чтобы такие теги были всегда и в обязательном порядке.

3. Статья не отвечает на главный вопрос в ключевой фразе и посетители не задерживаются долго на вашем сайте и сразу уходят. Это уже поведенческие факторы.

4. Контент вашего сайта очень долго загружается. Посетитель не станет ждать больше одной минуты. Некоторые не станут дожидаться и тридцати секунд, сразу перейдут на другой сайт.

5. Ключевая фраза повторяется в вашем тексте более двух раз. Это больная тема и в интернете приходится жестко его придерживаться. Поэтому досконально проверьте, сколько раз повторяется ваша ключевая фраза в созданном тексте. Если словосочетание встретится более трех раз, вырастает вероятность угрозы переоптимизации. Тогда господин Платон Щукин посчитает вашу новую статью второсортным спамом, и статья вылетает из ПС, или в лучшем случае отлетит на двести какое-то место и канет в неизвестность. Что в интернете является самим нежелательным итогом всей деятельности работы над сайтом.
 

Что делать, если статья проиндексирована, но не попала в ПС яндекса?

Проверить вашу статью по всем пунктам, которые написаны выше. Затем уже исправленную статью придется опубликовать по-новой. Но уже по другому адресу. Это обязательное условие. Иначе, господин Щукин не станет индексировать старый адрес статьи. Или пройдет месяц другой, прежде чем это произойдет. Поэтому url-адрес исправленного текста требуется обязательно поменять. Так будет гораздо быстрее. Поскольку яндекс обожает новые адреса.

Надеюсь, статья вам помогла, и вы получили ответ на свой вопрос.

Если есть другие вопросы, пишите.

Форма для ввода комментария или вопроса есть в конце каждого текста.
 

baseml.ru

Основы внутренней оптимизации. Индексация страниц сайта.

В своей статье «Основы контентной оптимизации: Не навреди!» я рассмотрел основные принципы оптимизации контента страниц, которая является существенной частью внутренней оптимизации сайта. Однако, определенную роль во внутренней оптимизации играют факторы, никак не связанные с контентом (назовем их неконтентными факторами). Одним из таких факторов является корректная индексация страниц сайта.

Необходимыми (но недостаточными!) условиями для попадания страницы в индекс являются следующие:

  • значение HTTP-статуса страницы, отдаваемого индексирующему роботу поисковой машины, должно иметь значение 200 ОК;
  • отсутствие запрета на индексацию данной страницы;
  • URL страницы должен быть известен поисковой машине.

Проверить HTTP-статус страницы «глазами» индексирующего робота и отсутствие запрета на ее индексацию в файле robots.txt можно в разделе «Проверка ответа сервера» Яндекс.Вебмастера, причем эта проверка производится только для тех сайтов, права на которые подтверждены в вашем аккаунте. В Инструментах для вебмастера Google для того, чтобы проверить, доступна ли конкретная страница сайта для индексации, можно воспользоваться режимом «Посмотреть как Googlebot» в разделе «Содержимое сайта». Запретить индексацию страницы можно несколькими способами:

  • с помощью файла robots.txt
  • с помощью специальных директив в HTML-тегах в коде страницы
  • изменяя настройки инструмента «Параметры URL» в разделе «Сканирование» Инструментов для вебмастера Google.

В файле robots.txt это можно сделать с помощью директив Disallow и Clean-param. Достаточно подробную справку по правилам составления файла robots.txt можно найти в разделе «Использование robots.txt» Помощи вебмастеру Яндекса и в разделе «Блокировка URL при помощи файла robots.txt» Справки Google.

Проверить корректность файла robots.txt можно в разделе «Анализ robots.txt» кабинета вебмастера Яндекса (причем, это можно сделать для любого сайта, а не только для тех, на которые подтверждены права) и в разделе «Инструмент проверки файла robots.txt» Инструментов для вебмастера Google (только для сайтов с подтвержденными правами).

К директивам, c помощью которых можно запрещать страницу к индексации, относятся мета-тег robots и атрибут rel=»canonical» тега . Справочную информацию по их использованию можно найти на страницах Помощи Яндекса и Справки Google. Справку по работе с инструментом «Параметры URL» раздела «Сканирование» Инструментов для вебмастера Google можно найти на странице https://support.google.com/webmasters/answer/1235687?hl=ru.

Для того, чтобы индексирующий робот нашел данную страницу, достаточно одной ссылки на неё со станицы, которая уже есть в индексе поисковика. Также о новых страницах на сайте можно сообщать поисковой машине с помощью файла Sitemap (справочную информацию по нему можно найти в Помощи Яндекса и Справке Google).

Но даже, если робот узнает о странице и посетит ее, то еще не факт, что она попадет в индекс. Проверить, знает ли индексатор Яндекса о конкретной странице, и включена ли она в поисковую базу, можно в разделе «Проверить URL» Кабинета вебмастера Яндекса. Есть несколько вариантов ответов:

  1. В данный момент адрес страницы неизвестен роботу
  2. Адрес страницы уже известен роботу, но в данный момент контент страницы ещё не проиндексирован.
  3. Страница была проиндексирована роботом и присутствует в поиске
  4. Страница обходится роботом, но отсутствует в поиске
  5. Страница обходится роботом, но отсутствует в поиске, поскольку дублирует уже имеющиеся на вашем сайте страницы.

Первый вариант ответа говорит нам о том, что, во-первых, у индексатора нет информации о том, что данная страница существует. Поэтому необходимо убедиться, что поисковый робот видит данную страницу, и она отдает ему отклик 200 указанным выше способом, а также разместить ссылку на нее на какой-либо странице, уже ранее проиндексированной поисковой машиной. Также для того, чтобы сообщить о странице индексирующему роботу, SEO-специалисты используют размещение ссылок на нее в Твиттере. Более того, до недавнего времени информирование индексатора о новой странице через Твиттер считалось SEO-специалистами наиболее быстрым и надежным способом, позволяющим обеспечить попадание страницы в поисковый индекс Яндекса буквально за считанные дни. Однако в последнее время в профессиональных дискуссиях все чаще появляются сообщения, что этот способ перестает работать. Возможно, виной тому стали промышленные способы эксплуатации данного способа «загона страниц в индекс», и Яндексом были повышены требования к характеристикам аккаунтов, информацию из которых следует учитывать при поиске новых страниц. Также первый вариант ответа может возникать в случаях, когда страница запрещена к индексации в файле robots.txt.

Однако основную проблему, связанную с индексацией, составляют варианты 4 и 5, когда индексирующий робот обходит страницу, но не включает ее в поисковый индекс. Это может быть связано, как с техническими параметрами страницы, такими как запрет к индексации с помощью мета-тега noindex или атрибута rel=»canonical» тега . Но может иметь место и классификация алгоритмом данной страницы, как не имеющей достаточно ценного содержания. В таком случае говорят, что страница попадает в «скрытый индекс». Как с этим бороться?

Во-первых, страница может быть признана полным или нечетким (частичным) дубликатом уже имеющейся в индексе страницы (вариант ответа номер 5). Такое часто случается с однотипными страницами (например, номенклатурными единицами каталога продукции), которые отличаются друг от друга лишь незначительным по удельному объему текстом. В этом случае, необходимо повышать удельную долю уникального текста на страницах – расширять индивидуальное описание и по возможности закрывать от индексации текстовые элементы, общие для всех страниц данного типа (например, пункты меню, новостную ленту, фрагменты «шапки», «подвала» и т.п.)

Во-вторых, страница может иметь недостаточное количество статического веса. Например, она имеет достаточно глубокий уровень вложенности и имеет при этом сравнительное небольшое количество внутренних ссылок. Здесь можно посоветовать оптимизировать структуру сайта, уменьшая уровень вложенности информативных страниц, и плотнее их перелинковывая друг с другом. Также можно посоветовать использовать внешние ссылки с других сайтов.

В-третьих, сам сайт может иметь достаточно низкий уровень авторитетности в глазах поисковой машины. Неуникальный контент, примитивный дизайн, слабая посещаемость, малое количество внешних входящих ссылок, с таких же малоавторитетных ресурсов, злоупотребление платными ссылками и рекламой – вот типичный портрет целевой аудитории алгоритма серии АГС (подробнее смотри в моей статье http://www.searchengines.ru/articles/sergey_lyudkevich.html), который методично отправляет целые сайты в скрытый индекс.

Резюмируя, можно отметить, что проблема индексации сайта, конечно же, является не самой сложной из проблем современного SEO. Как правило, достаточно овладеть базовым справочным материалом по теме и тщательно следовать его рекомендациям. Однако с пренебрежением относиться к данному вопросу тоже не стоит, дабы неожиданно не столкнуться с неприятностями, которые могут существенно затормозить продвижение сайта.

www.searchengines.ru

Диагностика сайта в Яндекс Вебмастер

Вкратце о диагностике сайта

Фатальные

Критичные

Возможные проблемы

Рекомендации

Вкратце о диагностике сайта

В этой статье мы подробно опишем большинство самых популярных проблем, которые выдает диагностика сайта от Яндекса. Напомним, что раздел диагностики находится в Yandex Webmaster на второй вкладке в левом меню.

Диагностика сайта

Краткую информацию о наличии проблем возможно найти в левом верхнем блоке на главной странице Вебмастера.

Блок диагностики сайта на главной странице

Прежде, чем рассказывать о каждой проблеме отдельно, поясним общую информацию. Яндекс разделил все ошибки на 4 вида:

  • Фатальные — то есть, те, которые несовместимы с отображением сайта в поисковой выдаче. Наличие таких ошибок, скорее всего, приведет к полному исключению сайта из поиска. Среди них — запрет индексации, различного рода санкции со стороны поисковиков, серьезное нарушение безопасности или неработоспособность сайта;

  • Критичные — то есть, те, которые серьезно затрудняют удобство пользования сайтом, его корректную работу или индексацию. Наличие таких ошибок вряд ли приведет к исключению ресурса из поисковой выдачи, но может сильно снизить видимость;

  • Возможные — то есть, те, которые влияют на удобство пользователей, отображение и корректную индексацию. Подобные ошибки стоит устранить для улучшения сайта и повышения видимости в органической выдаче. В общем списке сайтов Вебмастера возможные проблемы обозначаются серым восклицательным знаком.
    Обозначение возможной проблемы

  • Рекомендации — носят исключительно рекомендательный характер. Обычно направлены на улучшение сайта или отображения.

Фатальные проблемы

Решать фатальные проблемы нужно немедленно, иначе они приведут к исключению сайта из поисковой выдачи. Подобные ошибки справедливы не только для Яндекса, но и для всех остальных поисковых систем. Ниже мы опишем каждую из них в отдельности, а так же предложим варианты решения.

Сайт закрыт к индексации в файле robots.txt

Сайт закрыт к индексации в файле robots.txt

«При последнем обращении к файлу robots.txt было обнаружено, что сайт закрыт для индексации. Убедитесь в корректности файла robots.txt, иначе сайт может полностью пропасть из поиска.» © Яндекс Вебмастер

Очень серьезная, но легко решаемая проблема. Причиной ее появления может стать банальная ошибка в синтаксисе файла robots.txt или ненамеренный запрет индексации. Зачастую такую ошибку можно увидеть у новых сайтов, так как разработчики обычно закрывают ресурс для индексации и не всега открывают обратно.

Поправить это очень просто. Открываем свой robots.txt по ссылке ваш_домен/robots.txt и проверяем содержимое. Если в нем расположен код следующего содержания:

User-agent: *
Disallow: /

или

User-agent: Yandex
Disallow: /

То, просто заменяем его на шаблонные инструкции для Вашей CMS или прописываем уникальные вручную.

Подробнее о настройке файла robots.txt

Не удалось подключиться к серверу из-за ошибки DNS

Не удалось подключиться к серверу из-за ошибки DNS

«При попытке скачать данные с сайта не удалось подключиться к серверу из-за ошибки DNS. Если роботы не смогут получить доступ к серверу, сайт может полностью пропасть из поиска. Возможно, пользователи также не могут попасть на сайт.» © Яндекс Вебмастер

Данная проблема решается уже не так быстро, как предыдущая. Суть ее проста. Индексирующий робот Яндекса попросту  не смог получить доступ к сайту. То есть, корректная индексация уже невозможна. Если краулер, при повторных обращениях, будет продолжать получать ошибку, то сайт рано или поздно исключат из поиска.

В данном конкретном случае, лучше всего будет обратиться к разработчикам сайта или хост-провайдеру (регистратору доменного имени.) Если Вы не профессионал, то можете потерять много драгоценного времени в попытках разобраться в произошедшем. Помните, что фатальные ошибки нужно решать незамедлительно.

Главная страница сайта возвращает ошибку

Главная страница сайта отдает ошибку

«При обращении к главной странице сайта не удалось получить HTTP-код 200 OK. Поскольку страница недоступна для робота, она может быть исключена из результатов поиска.» © Яндекс Вебмастер

При обращении к главной странице сайта робот ожидает ответ 200 ОК. Только при его получении продолжается корректная индексация.

Если Вы столкнулись с вышеупомянутой проблемой, то вот несколько причин ее появления.

  1. Неверно настроен ответ главной страницы. К примеру, главная может отдавать 404 Not Found или 403. Что для нее не корректно. Определить ответ можно в Яндекс Вебмастере, при помощи инструмента «проверка ответа сервера«;

  2. Для главной страницы может быть настроен 301 редирект;

  3. Главная страница сайта может технически отсутствовать, что редкость.

Решается проблема путем проверки наличия страницы и ее ответа. Для разработчиков сайта устранить данную ошибку не составит никакого труда.

Обнаружены нарушения или проблемы с безопасностью

Обнаружены нарушения или проблемы с безопасностью

«Сайт может угрожать безопасности пользователя, или на нём были обнаружены нарушения правил поисковой системы. Наличие этой проблемы негативно сказывается на положении сайта в результатах поиска.» © Яндекс Вебмастер

Одна из самых сложно решаемых проблем. Причин ее появления может быть множество. Вот основные из них:

  1. Сайт был взломан и на нем находится вредоносный код. Это может быть вирусный рекламный баннер, вставки iframe, различного рода трояны, а так же множество другой гадости;

  2. Сбор, обработка или передача данных пользователей сделана насколько некорректно, что индексирующий робот заподозрил в этом мошеннические намерения;

  3. Сайт не соответствует правилам поисковой системы. То есть, имеет запрещенный контент, обманывает или вводит в заблуждение пользователей, подменяет материал и т.д.;

Стоит сказать, что данная проблема может появляться у очень молодых сайтов из-за темного прошлого доменного имени. Обязательно проверяйте домен перед покупкой.

Однако, не стоит беспокоиться и переделывать сайт, если Вы уверены в его корректной работе. Подобное сообщение может появляться по ошибке. Если это так, то оно автоматически пропадет через несколько обновлений.

Критичные проблемы

На критичные проблемы стоит сразу обратить внимание и начать искать решение. Их появление скорее всего не приведет к исключению из поиска, однако может серьезно повлиять на видимость сайта.

Долгий ответ сервера

Долгий ответ сервера

«При обращении к серверу среднее время ответа превышает 3 секунды. Долгая загрузка страниц затрудняет работу с сайтом.» © Яндекс Вебмастер

Это одна из основных причин неполной (некорректной) индексации. Робот отводит на каждый сайт определенное количество секунд, после чего переходит к следующем ресурсу. Если ответ сервера слишком долгий, то времени на загрузку страниц может просто не остаться.

Что бы решить эту проблему, необходимо обратиться к администратору сервера или хост-провайдеру.  Возможно, Вашему сайту просто не хватает выделенных для работы ресурсов.

Если данное сообщение появилось, а потом пропало без видимых причин, не стоит его игнорировать. Обязательно проверьте скорость ответа сервера, а так же параметры загрузки сайта. Наличие подобной проблемы влияет на индексацию вне зависимости от того, есть сообщение в Вебмастере или его нету.

Большое количество неработающих внутренних ссылок

Большое количество неработающих ссылок

«На сайте не работает значительное число внутренних ссылок. Это может затруднять навигацию пользователям.» © Яндекс Вебмастер

Причиной возникновения подобной проблемы может служить некорректный перенос разделов, страниц или сайта в целом. Так же, к этому может привести сбой в работе каталога, фильтра, пагинации или другого блока связанного со ссылками.

Определить точное количество неработающих ссылок и увидеть детали можно в разделе «Внутренние ссылки» Яндекс Вебмастера.

Внутренние ссылки Яндекс Вебмастер

В этом блоке подробно описываются причины, поэтому Вам останется только устранить проблемы внутри сайта.

Возможные проблемы

Несмотря на название, возможные проблемы все же являются серьезными изъянами с точки зрения SEO. Они не приведут к исключению ресурса из поиска, а так же слабо повлияют на позиции и видимость. Однако их устранение может привести к подъему поискового трафика и более лояльному отношению поисковиков.

Главная страница перенаправляет на другой сайт

Главная страница перенаправляет на другой сайт

«При обращении к главной странице робот получает перенаправление на другой сайт, что делает невозможным её индексирование.» © Яндекс Вебмастер

Данную проблему Яндекс относит к разделу «Возможные», однако с нашей точки зрения это серьезная ошибка. Речь сейчас не идет о перенаправлении на зеркала или «склейку». Только редирект на сторонний сайт.

При корректном обращении к главной странице краулер должен получать ответ 200 ОК, что означает, что страница доступна пользователям и ее можно индексировать. В случае получения 301 Redirect, робот не только отправляется на сторонний ресурс, но и получает тревожный сигнал, что сайт мог быть взломан или вводит пользователей в заблуждение. То есть, Вы уже рискуете попасть под фильтры безопасности.

Сразу проверьте ответ сервера, если это будет не 200 ОК — ищите и устраняйте причину. В случае получения 301 Redirect рекомендуем заглянуть в файл .htaccess и проверить его на наличие редиректа.

Отсутствуют теги <title>

Отсутствуют теги title

«Значительная часть страниц не содержит тег <title>, или он некорректно заполнен. Это может негативно повлиять на представление сайта в результатах поиска.» © Яндекс Вебмастер

Очень серьезное упущение с точки зрения поискового продвижения. Заголовки <title></title> являются одним из основных факторов внутренней оптимизации, которые влияют на ранжирование страницы.

Ранее этому заголовку мы посвятили полноценную статью. В ней разложено по полочкам все, что нужно знать о данном теге с точки зрения SEO.

Безусловно, Яндекс самостоятельно выберет текст для ссылки при построении поисковой выдачи и без сниппета Вы не останетесь, однако Ваша конкурентоспособность с точки зрения SEO сильно упадет.

Ошибки в файле robots.txt

Ошибки в файле robots.txt

«Файл robots.txt содержит ошибки. Это может привести к некорректному обходу и индексированию сайта.» © Яндекс Вебмастер

Данный файл представляет из себя список инструкций для индексирующего робота. Именно в нем определяется, что нужно загружать в базу, а что игнорировать. Находится он в корневой папке сайта и доступен по адресу www.ваш_домен.ru/robots.txt.

Большинство ошибок в robots.txt, обычно, связаны с синтаксисом прописываемых в нем инструкций. Лишняя точка, слэш или пробел могут привести к некорректному распознанию команды.

Поэтому, при появлении данной проблемы сразу открывайте свой роботс и начинайте проверять синтаксис. В этом деле Вам может помочь сервис «Анализ robots.txt» находящийся во вкладке «Инструменты» Яндекс Вебмастера.

Подробнее об ошибках и настройке файла robots.txt

Не найден файл robots.txt

Не найден файл robots.txt

«Робот не смог получить доступ к файлу robots.txt при последнем обращении. Из-за отсутствия параметров индексирования и инструкций в поиск могут попасть нежелательные страницы.» © Яндекс Вебмастер

Суть проблемы понятна из названия. Что бы решить ее, необходимо просто добавить robots.txt в корневой каталог Вашего сайта. Сделать это можно через FTP или при помощи различного рода плагинов.

Если Вы используете популярную CMS, то мы готовы предложить шаблонные решения. Однако, обратите внимание, что шаблоны инструкций не гарантируют корректность индексации и отсутствие мусора. У каждого сайта будут свои особенности и подводные камни.

Подробнее о настройке файла robots.txt

Отсутствуют мета-теги <description>

Отсутствие мета тегов description

«Значительная часть страниц сайта не содержит мета-тег <description>, или он некорректно заполнен. Это может негативно повлиять на представление сайта в результатах поиска.» © Яндекс Вебмастер

Это одна из самых распространенных проблем, с которой сталкивается практически каждый SEO специалист. Для ее решения необходимо просто добавить недостающие <description>.

Узнать полный список страниц с отсутствующими тегами Вы можете перейдя по ссылке «Ознакомьтесь» в описании проблемы.

Отсутствие meta тега <description> сильно влияет на корректность отображения сниппетов. Поэтому тянуть с решением проблемы не стоит.

Если подобная ошибка появилась у Интернет-магазина, сайта-каталога или другого крупного ресурса, то для ее решения есть стандартные плагины, которые формируют meta description автоматически. Пользоваться такими плагинами мы советуем в крайнем случае, так как результат работы не всегда удовлетворителен.

Подробнее о description и правилах заполнения

Некорректное отображение несуществующих файлов и страниц

Ошибка страницы 404

«Вероятно, на сайте некорректно настроен возврат HTTP-кода 404 Not Found, что может негативно сказаться на индексировании сайта роботом. Настройте возврат кода 404 на запрос несуществующих страниц.» © Яндекс Вебмастер

Проще говоря, у Вас попросту отсутствует или некорректно работает страница 404. Что бы разобраться в этом, необходимо перейти на несуществующий раздел. Сделать это можно введя любой некорректный URL, к примеру «ваш_домен.ру/none12345».

Если Вы видите перед собой неизвестную ошибку, белый экран, сообщение хост-провайдера или другую информацию, которая к сайту не относится — у Вас просто нету данной страницы. Шаблон для нее необходимо сделать в CMS сайта. Это напрямую относится к разработке и дизайну сайта, поэтому работы стоит поручить верстальщику.

Если Вы видите оформленную страницу 404 своего сайта, тогда проблема в ответе сервера. Нужно понимать, что надпись «404 — страница не найдена» не означает, что сайт действительно отдает «404 Not Found», скорее всего, результатом будет 200 ОК.

Проверить ответ сервера Вы можете в разделе «Проверка ответов сервера» во вкладке «Инструменты» Яндекс Вебмастера.

Создание страницы 404 Not Found и настройка ответа сервера полностью зависят от конкретного сайта, поэтому сделать пошаговую инструкцию просто невозможно.

Подробнее о странице 404 с точки зрения SEO

В файле robots.txt задана противоречивая директива Host

Задана противоречивая директива host

«В директиве Host указан домен, где аналогичные указания в файле robots.txt отсутствуют. Чтобы указания директивы Host были учтены, идентичные директивы должны присутствовать в файлах robots.txt всех зеркал сайта.» © Яндекс Вебмастер

Суть проблемы в следующем. Есть два зеркала. У обоих есть файл robots.txt, в котором указаны различные параметры инструкции HOST.

Решение очень простое. Необходимо указать во всех HOST одно главное зеркало. Это нужно, что бы  у робота не оставалось сомнений, какое из зеркал основное.

Бывает так, что файл robots.txt один и инструкции попросту не могут различаться. В таком случае нужно подождать и сообщение пропадет.

В файле robots.txt не задана директива Host

В файле robots.txt не задана директива host

«Для корректного определения главного зеркала сайта рекомендуется задать соответствующую директиву Host в файлах robots.txt всех зеркал сайта. В случае ее отсутствия главное зеркало может быть выбрано автоматически.» © Яндекс Вебмастер

Помимо прочих инструкций в файле robots.txt для агента Яндекса необходимо указывать директиву host. Пример  директивы приведен на рисунке ниже.

Отсутствует host в robots.txt

Синтаксис ее крайне прост. Сначала пишется служебное слово «Host:», далее через пробел вставляется главное зеркало сайта. При этом нужно учесть, что протокол http не пишется. Добавляется только https при его наличии. Убедитесь, что зеркало выставленное в Яндекс Вебмастере и других host (у сайтов-зеркал) соответствует указываемому в robots.txt. В противном случае Вы получите ошибку, о которой говорится выше.

Подробнее о директиве host

Большое количество страниц дублей

Большое количество страниц-дублей

«На сайте обнаружено большое количество одинаковых страниц, это усложняет индексирование сайта. Проверьте, правильно ли настроены редиректы и корректно ли составлен файл robots.txt.» © Яндекс Вебмастер

Достаточно серьезная проблема, которая для решения, зачастую, требует квалифицированной помощи программиста. Страницы-дубли, по сути, представляют собой различные URL, которые ведут на одну и ту же страницу. (Реже, это несколько абсолютно одинаковых html файлов с разными URL)

Когда индексирующий робот попадает на сайт, он старается обойти все доступные URL адреса и загрузить по ним уникальный контент. Если робот переходит по адресу и «видит» уже загруженную ранее страницу, то он исключает ее из поиска как дубликат, при этом теряя драгоценное время обхода.

Определить наличие дублей возможно в Яндекс Вебмастере. Необходимо зайти в раздел «Индексирование» -> «Страницы в поиске» -> «Исключенные страницы». Тут будут представлены все исключенные из поиска разделы, в том числе и по причине дублирования. Для того, что бы долго не искать, можно настроить фильтр по статусу. (нажать на значок воронки рядом с заголовком)

Фильтр по статусу

После того, как все страницы будут отсортированы, Вы сможете увидеть имеющиеся дубликаты, о которых знает Яндекс.

Множество страниц дублей

Для решения данной проблемы необходимо, в первую очередь, определить причину появления дублей. Их может быть несколько.

  1. При создании страницы, в CMS генерируется технический адрес, который обычно имеет вид «post=3333&action=edit» или любой другой не ЧПУ. Вы не хотите видеть подобный URL и создаете для страницы человекочитаемый адрес. Таким образом статья становится доступна по 2 адресам. В этом случае необходимо скрыть все технические адреса в robots.txt при помощи маски;

  2. На сайте имеются динамические URL, которые дополняются различными префиксами в зависимости от выбранных параметров, поиска, сортировки и т.д. Их так же необходимо скрывать при помощи маски в robots или отказаться от динамических URL;

  3. Во время настройки рекламы, для получения данных о клиенте и источнике, часто используются дублирующие ссылки с параметрами. Такие URL нужно сразу закрывать в robots.txt во избежание попадания в индекс;

  4. Некоторые системы управления могут отображать страницу по нескольким человекочитаемым URL. К примеру, страница может быть доступна по всем 3-м адресам: «/page1/», «/page1.php», «/page1.html». Исключаются подобные дубли так же при помощи маски.

После того, как дубли будут закрыты для индексации, предупреждение пропадет автоматически. Но, не стоит думать, что это произойдет в первую неделю. Подобное сообщение может держаться месяцами.

Нет используемых роботом файлов Sitemap

Нет используемых роботом файлов sitemap.xml

«Робот не использует ни одного файла Sitemap. Это может негативно сказаться на скорости индексирования новых страниц сайта. Если корректные файлы Sitemap уже добавлены в очередь на обработку, сообщение автоматически исчезнет с началом их использования.» © Яндекс Вебмастер

Это длинное сообщение описывает всего лишь отсутствие  sitemap.xml. Что бы поправить ситуацию нужно просто создать данный файл и разместить его в корневом каталоге Вашего сайта. Ранее мы подробно рассказывали, как это сделать.

После создания необходимо зайти в Яндекс Вебмастер -> «Индексирование»  — > «Файлы Sitemap» -> «Добавить карту». В этом же разделе возможно отследить корректность индексации и в случае необходимости обновить.

После того, как робот увидит sitemap сообщение о проблеме пропадет автоматически.

Обнаружены ошибки в файлах Sitemap

Ошибки в файле sitemap

«В одном или нескольких файлах Sitemap обнаружены ошибки, которые могут повлиять на обработку файлов индексирующим роботом.» © Яндекс Вебмастер

В случае возникновения данной проблемы воспользуйтесь сервисом анализа sitemap.xml, который находится прямо в Яндекс Вебмастере. («Инструменты»-> «Анализ файлов Sitemap»).

Если ошибку не удается выявить, проще всего создать новую карту сайта. Как это сделать, подробно описывали ранее.

Если sitemap генерируется при помощи плагинов, обратите внимание на поля, которые находятся в итоговом файле. В отличии от Google, Яндекс не воспринимает инструкцию <image:image> и может сообщать об ошибке.

Файлы Sitemap давно не обновлялись

Файлы sitemap давно не обновлялись

«В файлах Sitemap не обнаружено никаких изменений с undefined. Проверьте, не нужно ли обновить файлы Sitemap.»© Яндекс Вебмастер

Тут все просто. Необходимо обновить все имеющиеся  на сайте файлы  sitemap.xml. Причем сделать это нужно корректно. Вот лишь несколько ошибок, которые допускают при обновлении карты сайта.

  • Даты изменения страниц не соответствуют реальному обновлению страниц. Подобная ошибка происходит в тот момент, когда Вы используете online сервис. В таком случае все даты изменения могут быть одинаковыми и не соответствовать фактическим. Это заставляет поисковую систему повторно загружать один и тот же материал, что приводит к пустой трате времени;

  • Все страницы имеют один и тот же приоритет. В таком случае данный параметр sitemap.xml просто перестает иметь какой-либо смысл;

  • Вероятная частота изменения не соответствует действительной. Не стоит писать, что Ваши страницы обновляются каждый час. Обмануть поисковую систему не удастся и преимущества Вы не получите, но вот возможность корректного указания частоты обновления утратите.

Подробнее о создании sitemap.xml

Рекомендации

Этот раздел носит исключительно информационный характер, однако мы советуем соблюсти все его требования.

Не задана региональная принадлежность сайта

Не задана региональная принадлежность сайта

«В разделе «Региональность» регион сайта не задан явно, это может осложнить ранжирование. Если ваш сайт интересен пользователям вне зависимости от региона, выберите в разделе вариант «Нет региона».» © Яндекс Вебмастер

У данной проблемы есть две стороны медали. С одной — присвоение региона не является обязательной процедурой и Яндекс сам может определить его. С другой — если регион определен некорректно, то Вы можете получить нерелевантный трафик или же вообще лишиться его.

Поэтому мы настоятельно рекомендуем присваивать регион каждому сайту. Стоит отметить, что есть ряд ресурсов, которые не имеют региональной привязки. В таком случае необходимо сообщить Яндексу, что региона Вы не имеете.

Подробнее о том, как выбрать и присвоить регион.

Сайт не оптимизирован для мобильных

Страница не оптимизирована под мобильные устройства

«По результатам работы алгоритма, определяющего, насколько сайт подходит для мобильных устройств, сайт не удалось признать оптимизированным.» © Яндекс Вебмастер

Сегодня эта проблема должна находиться уже среди критичных. Поисковые системы не раз говорили о том, что будут занижать сайты не имеющие мобильной версии. С каждым годом процентное соотношение трафика с мобильных устройств растет,  поэтому мобильная адаптация должна быть у всех.

Насколько корректно Ваш сайт адаптирован под мобильные телефоны и планшеты Вы можете определить с помощью официального сервиса Яндекса — «Проверка мобильных страниц» . Располагается он в разделе «Инструменты» Яндекс Вебмастера.

Ошибка счётчика Яндекс.Метрики

Ошибка счетчика Яндекс Метрики

«Яндекс.Метрика помогает отслеживать источники трафика, получать детальную статистику о посещаемости и качестве страниц сайта, а также анализировать видеозаписи действий посетителей.» © Яндекс Вебмастер

Тут все просто. Скорее всего код Яндекс Метрики был установлен некорректно или не на все страницы.

Если Вы зайдете в счетчики и увидите красный значок слева от сайта — данные в Метрику не поступают. Нажмите на него.

Ошибки счетчика Яндекс Метрики

Если он не станет зеленым, то просто переустановите счетчик. Для этого нужно:

  1. Перейти в настройки нажав на значок шестеренки в правой части экрана;

  2. Переходим на вкладку «Код счетчика» и копируем его;

  3. Открываем шаблон, который формирует страницы сайта и вставляем в него код;

  4. Переходим в метрику и нажимаем на красный кружок со стрелочкой. Он должен стать зеленым.

В случае, если Вы уверены, что код размещен правильно, но данные так и не поступают — обратитесь в службу поддержки или подробно ознакомьтесь с процессом установки счетчика.

Сайт не зарегистрирован в Яндекс.Справочнике

Сайт не зарегистрирован в Яндекс Справочнике

«Сайт не добавлен в Яндекс.Справочник. Если у вас есть офисы или филиалы, добавьте их в справочник, чтобы улучшить внешний вид сайта в поиске и региональное ранжирование. Если офисов и филиалов нет, явно укажите «Нет региона» в подразделе «Вебмастер» раздела настройки региональности.» © Яндекс Вебмастер

С точки зрения SEO, регистрация сайта в Яндекс Справочнике может дополнить сниппет такой полезной информацией, как телефон, адрес и режим работы. По брендовым запросам справа от сниппета начнет появляться карта с адресом и подробной информацией о фирме. Такие сниппеты любят пользователи, поэтому стоить уделить 15 минут на регистрацию.

Зарегистрироваться проще некуда. Это совершенно бесплатно.

  1. Заходим в Яндекс Аккаунт и переходим по ссылке: https://yandex.ru/sprav/add/;

  2. Вводим информацию о компании и нажимаем «Добавить организацию»;

  3. Ожидаем одобрения модераторов. (Обычно проблем с этим не возникает)

После успешной модерации информация появится в выдаче через несколько обновлений.

Отсутствует файл favicon на сайте

Отсутствует файл favicon на сайте

«Не найден файл с изображением, которое должно отображаться во вкладке браузера и может быть показано возле названия сайта в поиске.» © Яндекс Вебмастер

Файл favicon.ico это небольшая картинка, которая отображается во вкладке браузера.

Отсутствует favicon

Favicon имеет расширение .ico и располагается в корневой папке сайта или шаблона.

Кроме отображения во вкладке, данное изображение присутствует в поисковой выдаче рядом со ссылкой на сайт. Именно поэтому о нем сообщает Яндекс.

Сделать favicon очень просто. Для этого нужно создать рисунок квадратной формы, после чего воспользоваться одним из множество online генераторов. Примеры таких сервисов:

Скачайте получившийся файл, назовите его favicon.ico и разместите в корневой папке сайта. Несколько раз обновите браузер и Ваше изображение появится во вкладке рядом с доменом. В поисковой выдаче favicon обновится в течение 2-3 недель.

Отсутствуют быстрые ссылки

Отсутствуют быстрые ссылки

«В некоторых случаях в результатах поиска возможно отображение быстрых ссылок в сниппете сайта, что улучшает его видимость и количество переходов. Ссылки формируются полностью автоматически, роботы регулярно оценивают возможность показа быстрых ссылок.» © Яндекс Вебмастер

Это исключительно информационное сообщение, так как напрямую повлиять на вывод быстрых ссылок Вы не можете. Напомним, что последние располагаются под основным сниппетом сайта в органической выдаче. На рисунке ниже приведен пример быстрых ссылок для сайта компании Apple.

Отсутствуют быстрые ссылки

Но, несмотря на то, что напрямую влияния Вы не имеете, возможно «помочь» роботу определить быстрые ссылки. Делается это путем создания корректной древовидной структуры сайта. То есть, выделить основные разделы, сгруппировать в них подразделы и корректно связать все перелинковкой.

В этом случае Яндекс сможет с большей вероятностью определить основные разделы и сформировать блок быстрых ссылок.

dh-agency.ru

Сайт проиндексирован, но страниц нет в поиске вообще — Яндекс

Здравствуйте!
20 февраля 2016 после очередного Апа мой сайт полностью пропал из результатов поиска Яндекс. Не могу найти ни одной страницы. Не нахожу даже в ТОП-100. Вебмастер пишет, что проиндексированы и участвуют в поиске 1641 страница. Но их нет ни по одному запросу, кроме адреса сайта и названия.

До этого из 150 отслеживаемых позиций 60% были в топ-10 Яндекса и основной трафик шел из органической выдачи.

А теперь… Даже самые низкочастотные запросы, дословно повторяющие содержимое страниц — не находятся. Пример сверхнизкочастотного запроса: «поддельные колготки миф или правда» — точное совпадение с названием моей статьи, давным давно размещенной на сайте — не находится.

Ни одного товара, ни одной категории товара, ни одного информационного запроса, ни одной статьи в поиске нет!!!

Платонам писал. Получил ответ: 

20 февраля я передал описание данной ситуации аналитикам поискового отдела нашей компании. Они проверят, корректно ли в данном случае работают наши алгоритмы, и при необходимости в них будут внесены соответствующие изменения. Если в течение двух недель ситуация не изменится, пожалуйста, сообщите нам об этом

Сайт у меня единственный, аффилятов нет. Ссылки уж года два не покупаю и никогда не продавал. Баннерной рекламой не занимаюсь. ПФ не накручивал. Профили из соц. сетей не воровал.

Трафик с Яндекса после 20 февраля — 0. Кормлюсь пока небогатым топом от Гугл и прямыми заходами постоянных клиентов. Нанял спеца для настройки Adwords.

Теряюсь в догадках, сушу сухари и откладываю на Доширак. Просто в шоке…. Сайт — единственный источник дохода для всей семьи.

Что это может быть??? Пациент: http://www.dlyapodruzek.ru

Заранее спасибо за ответы!

post-12361-0-86678800-1456441661_thumb.png

talk.pr-cy.ru

0 0 голоса
Рейтинг статьи
Подписаться
Уведомить о
guest

0 комментариев
Старые
Новые Популярные
Межтекстовые Отзывы
Посмотреть все комментарии

А вот еще интересные материалы:

  • Яшка сломя голову остановился исправьте ошибки
  • Ясность цели позволяет целеустремленно добиваться намеченного исправьте ошибки
  • Ясность цели позволяет целеустремленно добиваться намеченного где ошибка
  • Внимание на данном шаге произошла ошибка установки продукта
  • Внимание детектива привлекла оставленная книга на столе ошибка