utm метки в robots.txt - Страница 2 - Форум об интернет-маркетинге

ziliboba0213 · 10.02.2021, 18:00

Цитата:

Сообщение от Academik

Так если корректно настроен мета-тег canonical, разве страницы с get-параметрами могут попасть в индекс даже если нет запрета в robots.txt?

Постоянно в яше то залетают, то удаляются

Типа таких:

Цитата:

/search?q=Вопрос

Tanya · 10.02.2021, 18:39

Цитата:

Сообщение от Academik

Так если корректно настроен мета-тег canonical, разве страницы с get-параметрами могут попасть в индекс даже если нет запрета в robots.txt?

Еще как. В индекс попадают даже запрещенные к индексации в robots.txt.
...
А потом еще и замечания делают. Мы типа виноваты, что Гугл проиндексировал запрещенное, и должны принять меры к исправлению недоразумения.

Academik · 10.02.2021, 19:29

Я думал это надежный способ избавления от дублей, а тут такое...

burunduk · 11.02.2021, 00:56

Цитата:

Сообщение от Diversant

Как раз эта задача первоначально и стояла отделить платный траф с мерчанта от бесплатного

а зачем для этого utm?
можно же и без меток разобраться откуда траф, да сложнее, но реально
если без utm просто нельзя добавить фид,, то ставьте 301 редирект (+ можно немного поклоачить для бота)

burunduk · 11.02.2021, 00:58

Academik, с дублями надо бороться на стороне своего сервера

Marat · 11.02.2021, 01:36

Цитата:

Сообщение от Diversant

В robots.txt стоит запрет от всякого мусора (поиск по сайту, страницы сортировок и т.д.) - Disallow: /*?*
Merchant ругается на то, что нет доступа и выкидывает товары из мерчанта.
Что делать? Прописать Allow: *?utm*

Пробовать
https://support.google.com/merchants.../6098185?hl=ru

Код:

User-agent: Googlebot
Allow: *чего там у вас*

User-agent: Googlebot-image
Allow: *чего там у вас*

Academik · 11.02.2021, 12:59

Цитата:

Сообщение от burunduk

Academik, с дублями надо бороться на стороне своего сервера

Согласен, только тут речь идет про utm метки, по сути для сервера это get запросы. Не отдавать же 404 код для них.

ziliboba0213 · 11.02.2021, 15:03

Интересно, а зачем utm идет как get параметр, а, например, не как # ?

Alex Klo · 11.02.2021, 15:19

Цитата:

Сообщение от ziliboba0213

Интересно, а зачем utm идет как get параметр, а, например, не как # ?

чтобы продвинутый админ сайта сам мог вести статистику...

ziliboba0213 · 11.02.2021, 15:33

Цитата:

Сообщение от Alex Klo

чтобы продвинутый админ сайта сам мог вести статистику...

А через хэш нельзя разве?

10.02.2021, 19:29	#13
Academik Особый статус Студент Регистрация: 21.06.2020 Сообщений: 10 Сказал(а) спасибо: 29 Получил(а) "Спасибо": 43 Нарушения: 0/0 (0) Репутация: 59673	Re: utm метки в robots.txt Я думал это надежный способ избавления от дублей, а тут такое...

11.02.2021, 00:58	#15
burunduk попробуй отними Профессор Регистрация: 14.07.2020 Сообщений: 890 Сказал(а) спасибо: 1,024 Получил(а) "Спасибо": 2,088 Нарушения: 0/0 (0) Репутация: 660509	Re: utm метки в robots.txt Academik, с дублями надо бороться на стороне своего сервера

11.02.2021, 15:03	#18
ziliboba0213 Позитив =) Академик Регистрация: 21.06.2020 Адрес: Санкт-Петербург Сообщений: 4,367 Сказал(а) спасибо: 24,649 Получил(а) "Спасибо": 13,457 Нарушения: 0/0 (0) Репутация: 1158348	Re: utm метки в robots.txt Интересно, а зачем utm идет как get параметр, а, например, не как # ?

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
robots.txt как и зачем	CrazyBug	Продвижение и оптимизация сайтов	13	02.07.2020 19:00