а где смотреть и как на каких страницах он был? вроде на хостинге надо смотреть....? я просто никогда не заморачивалась таким вопросом...))) тут вроде - Access Logs?
Не.. у меня есть модуль, bot_checker. Фиксирует все посещения ботами В нем и смотрю. После отправки на индексацию через апи пришел мобильный бот Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/98.0.4758.102 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) А основной Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) Сделали эксперимент!!!! на ту страницу, которую часто посещает бот добавили ссылку на нужную.. И..опа бот пришел!!!
можно конечно смотреть и анализаторами логов, но мне мой удобней, и я могу построить любые интересующие меня запросы
ну я так тоже делаю.... на страницу вставляю ссылки и он по ним уже заходит ))) несколько страниц так уже закинула... но это же не вариант по странице ему закидывать ))))
эту страницу он проиндексировал еще неделю назад....похоже действительно так - заходит на одну и туже страницу....)))
а что этот модуль еще показывает что еще умеет? сколько стоит ? он только ботов показывет? возможно я бы купила....если он действительно необходим для дела и не только ботов показывает )))
Сейчас он у меня работает в режим отладки Показывает всеХ (сайт в запуске, поэтому пока успеваем отслеживать) Из стандартных возможностей можно посмотреть движение по странице Обнаружить каких-то левых ботов, соответственно можно узнать частоту, и принять решение о легитимности т.к. все в базе, то можно построить нужные запросы, для анализа графиков нет - не люблю
Пока из всего "молодняка" что я вижу, есть прямая корреляция с трафиком. С глубокими посещениями сканирует все даже недельный сайт. Так же выплевывает малопосещаемые страницы. С малым трафиком начинает вяло добавлять в индекс, только через 90 дней (что указывает на связь с разделом Качество: "За последние 90 дней на сайте было мало посетителей, поэтому оценить его удобство нельзя.". Это будет видно по периодическим сканированиям карты сайта. На продвинутых сайтах у меня всё ОК и раздел Качества зеленый, и сканирует как раньше. А для новых пришлось подливать трафик, чтоб запустить сканирование. Предполагаю что это новый вид песочницы которая теперь учитывает поведенческий фактор и навесила ему большой коэффициент. Так же есть чуйка что это из-за аналитики 4, в которую они внедрили что-то подобие яндексовского вебвизора, и которую из-за этого шпионажа запретили в германии, франции и австрии.
ну так откуда взять трафик если сайту 2 месяца? что накрутили это понятно....но если не будет сканировать то страниц не будет в индексеоткуда будет трафик если не накручивать..?
я же говорю.... блог индексирует - час и страница в индексе....))) товар не хочет... вот специально смотрела... 10 -15 мин после отправки запроса уже просканировал и через час в индексе ))) страница товара не просто пустышка с картинкой и ценой - даже текст - описание есть...причем уникальный а ни откуда то стыриный и перевернутый...
Ну это мой сеошный секрет, не могу раскрыть к сожалению, а то конкуренты так же будут делать, а оно мне не надо. Гуглите "подлив трафика". Есть ещё среди сеошников дебилы которые не верят в него, поэтому в этих темах и статьях постоянно срач. Вообщем кто пишет что не помогает - они его "не умеют готовить".