Форум об интернет-маркетинге
Вернуться   Форум об интернет-маркетинге > Поисковые системы, продвижение и оптимизация сайтов. > Яндекс

Яндекс Обсуждение поисковой системы

Ответ
 
Опции темы
Старый 19.11.2020, 09:26   #1
svv
Member
Аспирант
 
Регистрация: 24.06.2020
Сообщений: 97
Сказал(а) спасибо: 5
Получил(а) "Спасибо": 38
Нарушения: 0/0 (0)
Репутация: 80159

Thread Starter Забвение сайта

Как скоро после установки директивы "Disallow: / " в robots и отдачи всеми страницами 404й ошибки Яндекс забудет содержимое сайта, чтобы при растаскивании текстов с него на другие сайты он не помнил, что исходным источником был удаленный сайт? По запросу "host:site.ru" он уже через сутки ничего не показывает, но в вэбмастере видно, что страницы еще в базе.
svv вне форума   Ответить с цитированием
Старый 19.11.2020, 10:18   #2
Coder
Senior Member
Доцент
 
Регистрация: 25.07.2020
Сообщений: 437
Сказал(а) спасибо: 486
Получил(а) "Спасибо": 712
Нарушения: 0/0 (0)
Репутация: 7417
Отправить сообщение для Coder с помощью ICQ

По умолчанию Re: Забвение сайта

Для каждого сайта есть свой лимит обхода роботом - когда все обойдёт и внесет изменения - полгода и до года - если говорим о всем сайте - и пока не очистится кэш ПС.

Можно ускорить через переобход или отдельных страниц, или самого роботса - переобход отдельных предпочтительней.

А вообще закрывать от индекса сайт надо бы не через файл роботс - можно закрыть сайт или заданную страницу от индексации с помощь мета-тега robots. Этот способ является предпочтительным и с большим приоритетом выполняется пауками поисковых систем.
Coder вне форума   Ответить с цитированием
Сказали спасибо:
svv
Старый 23.12.2020, 20:05   #3
svv
Member
Аспирант
 
Регистрация: 24.06.2020
Сообщений: 97
Сказал(а) спасибо: 5
Получил(а) "Спасибо": 38
Нарушения: 0/0 (0)
Репутация: 80159

Thread Starter Re: Забвение сайта

Ровно через месяц сайт полностью вылетел.
svv вне форума   Ответить с цитированием
Старый 23.12.2020, 20:14   #4
ziliboba0213
Позитив =)
Академик
 
Аватар для ziliboba0213
 
Регистрация: 21.06.2020
Адрес: Санкт-Петербург
Сообщений: 4,360
Сказал(а) спасибо: 24,594
Получил(а) "Спасибо": 13,412
Нарушения: 0/0 (0)
Репутация: 957405

По умолчанию Re: Забвение сайта

Офтоп. Я вешаю "403 доступ запрещен"
ziliboba0213 вне форума   Ответить с цитированием
Старый 23.12.2020, 22:15   #5
XPraptor
Думаю, что надо худеть
Академик
 
Аватар для XPraptor
 
Регистрация: 22.06.2020
Сообщений: 1,791
Сказал(а) спасибо: 1,526
Получил(а) "Спасибо": 1,939
Нарушения: 0/0 (0)
Репутация: 541251

По умолчанию Re: Забвение сайта

svv, отдавайте 410, что сайт удален, тогда все быстрее будет.
Состояние бота google и полезные ресурсы: всё про гугл
XPraptor вне форума   Ответить с цитированием
2 пользователя(ей) сказали cпасибо:
Старый 23.12.2020, 22:24   #6
medexpert
Member
Аспирант
 
Аватар для medexpert
 
Регистрация: 21.06.2020
Сообщений: 87
Сказал(а) спасибо: 44
Получил(а) "Спасибо": 30
Нарушения: 0/0 (0)
Репутация: 111937

По умолчанию Re: Забвение сайта

Яндекс живёт 3-х месячными циклами - счетчик метрики, после снятия, можно восстановить три месяца, три месяца помнит историю таксиста...
Я бы подождал, после полного очищения базы, ещё три месяца.
"... Нет того веселья:
Или куришь натощак,
Или пьёшь с похмелья."
medexpert вне форума   Ответить с цитированием
Старый 24.12.2020, 22:22   #7
-= Serafim =-
Senior Member
Доцент
 
Регистрация: 21.07.2020
Сообщений: 223
Сказал(а) спасибо: 3
Получил(а) "Спасибо": 146
Нарушения: 0/0 (0)
Репутация: 26069

По умолчанию Re: Забвение сайта

Самый быстрый способ, чтобы Яндекс выкинул из индекса - отдавать неверную rel="canonical" для каждой страницы.
SEO продвижение сайтов
-= Serafim =- вне форума   Ответить с цитированием
Старый 25.12.2020, 12:00   #8
Rema
Senior Member
Профессор
 
Регистрация: 25.06.2020
Адрес: Спб
Сообщений: 508
Сказал(а) спасибо: 1,294
Получил(а) "Спасибо": 502
Нарушения: 0/0 (0)
Репутация: 84889

По умолчанию Re: Забвение сайта

Яндекс до сих пор ходит на страницы, удалённые в 2013-2014 гг.
Вернее, там были изменены урлы, и для несущественных страниц я не ставила редиректы. Порой вижу в журнале, что онЕ заходили, а там - ай! - 404 ошибка. Откуда он берет эти урлы, ума не приложу.
За что себя люблю - за красоту и скромность.
Rema вне форума   Ответить с цитированием
Ответ

Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход


Текущее время: 18:15. Часовой пояс GMT +3.


Powered by vBulletin® Version 3.8.11
Copyright ©2000 - 2024, vBulletin Solutions Inc. Перевод: zCarot