15.07.2021, 13:30 | #1 |
Senior Member
Профессор
Регистрация: 21.06.2020
Сообщений: 859
Сказал(а) спасибо: 80
Получил(а) "Спасибо": 187
Нарушения: 0/0 (0)
Репутация: 74780
|
Petal Search - блочить или нет?
За последнее время ушел от темы сайтов, поэтому может всем известно кроме меня
На сайте поселился активный робот "Petal Search". Стабильно забирает 10 - 20 страниц в минуту. Вопрос: Есть ли от него польза? Может заблокировать в robots.txt или по IP ? |
15.07.2021, 13:59 | #2 |
Senior Member
Профессор
Регистрация: 21.06.2020
Сообщений: 859
Сказал(а) спасибо: 80
Получил(а) "Спасибо": 187
Нарушения: 0/0 (0)
Репутация: 74780
|
Re: Petal Search - блочить или нет?
И попутно вопрос - этот Petal Search может работать через PWA приложение?
На сайте статистика по PWA. Как-то делал посмотреть кто использует. Его робот как-бы через него сканирует и через обычные страницы. Фиг поймешь. Но с сайта не слазит. |
15.07.2021, 14:27 | #3 |
Senior Member
Профессор
Регистрация: 21.06.2020
Сообщений: 859
Сказал(а) спасибо: 80
Получил(а) "Спасибо": 187
Нарушения: 0/0 (0)
Репутация: 74780
|
Re: Petal Search - блочить или нет?
На буржуйском форуме всё ответили - что и как.
По ходу серьезный поисковик. Есть своя консоль вебмастера https://webmaster.petalsearch.com/ Статистика, отчеты, настройка робота, ... Установил что-бы реже заходил. В общем тема зарыта. |
2 пользователя(ей) сказали cпасибо: |
21.01.2022, 07:10 | #4 |
Member
Студент
Регистрация: 21.06.2020
Сообщений: 41
Сказал(а) спасибо: 137
Получил(а) "Спасибо": 18
Нарушения: 0/0 (0)
Репутация: 230
|
Re: Petal Search - блочить или нет?
|
21.01.2022, 09:18 | #5 | |
Senior Member
Профессор
Регистрация: 21.06.2020
Сообщений: 859
Сказал(а) спасибо: 80
Получил(а) "Спасибо": 187
Нарушения: 0/0 (0)
Репутация: 74780
|
Re: Petal Search - блочить или нет?
Цитата:
А так вобщем-то почти весь сайт обошел, пишет в индексе 375К страниц. |
|
21.01.2022, 16:36 | #6 |
Senior Member
Профессор
Регистрация: 21.06.2020
Сообщений: 859
Сказал(а) спасибо: 80
Получил(а) "Спасибо": 187
Нарушения: 0/0 (0)
Репутация: 74780
|
Re: Petal Search - блочить или нет?
Там еще время для сканирования нужно выставлять - в какие часы сканировать.
И еще Effective Data - насколько я понял, это время действия твоих установок. Может оно у тебя закончилось. Я на несколько лет поставил. |
21.01.2022, 20:13 | #7 |
Member
Студент
Регистрация: 21.06.2020
Сообщений: 41
Сказал(а) спасибо: 137
Получил(а) "Спасибо": 18
Нарушения: 0/0 (0)
Репутация: 230
|
Re: Petal Search - блочить или нет?
|
21.01.2022, 20:13 | #8 |
Member
Студент
Регистрация: 21.06.2020
Сообщений: 41
Сказал(а) спасибо: 137
Получил(а) "Спасибо": 18
Нарушения: 0/0 (0)
Репутация: 230
|
Re: Petal Search - блочить или нет?
|
22.01.2022, 20:19 | #9 |
Member
Студент
Регистрация: 21.06.2020
Сообщений: 41
Сказал(а) спасибо: 137
Получил(а) "Спасибо": 18
Нарушения: 0/0 (0)
Репутация: 230
|
Re: Petal Search - блочить или нет?
|
23.01.2022, 11:19 | #10 | |||
Senior Member
Профессор
Регистрация: 21.06.2020
Сообщений: 859
Сказал(а) спасибо: 80
Получил(а) "Спасибо": 187
Нарушения: 0/0 (0)
Репутация: 74780
|
Re: Petal Search - блочить или нет?
Цитата:
На данный момент получилось всего 100 - 200 заходов в сутки Трафика от туда очень мало.
|
|||
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Google Search Console | Vladimir | Гугл и другие поисковики | 9 | 13.09.2021 07:12 |
Search Console Insights beta | Diversant | Гугл и другие поисковики | 4 | 05.07.2021 09:40 |
Google search console: Отчёт работа страниц | ziliboba0213 | Гугл и другие поисковики | 15 | 20.04.2021 19:43 |
Google собирает всех на Search On - расскажут об улучшении поиска | XPraptor | Гугл и другие поисковики | 30 | 20.10.2020 22:31 |
Google search console не добавляет урл на индексацию. Глючит опять? | ziliboba0213 | Гугл и другие поисковики | 6 | 01.08.2020 01:52 |