GoogleBot + Pikabu
Всем привет.
Небольшой спойлер для тех, кто не в курсе - сейчас у Google проходит очередной апдейт. Пикабу неплохо растет по трафику и количеству ключей в этот и осенний (2023 г.) апдейт гугла. Вот скриншот из вражеского ахрефса:
Помимо пикабу, гугл начал отдавать предпочтение и другим сайтам с UGC контентом (юзер контент): реддит, куора и тд. Сейчас не будем о них.
Я что сейчас делаю? Хочу провести анализ посещаемости сайта гугло-ботом, если он упоминается на подобных ресурсах. Начинаю с пикабу. Для этого сделано:
Настроены серверные логи
Настроен их парсинг и визуализация: Python + Clickhouse + MySQL
Далее буду делать выводы насколько сильно гуглобот любит пикабу и сайты, на которые пикабу ссылается.
Тестирую на экспериментальном сайте sever.spb.su
Собственно, вот сама ссылка для эксперимента: https://sever.spb.su/pikabu-googlebot/
Если кому интересно, пишите в коменты, поделюсь через недели две результатами.