Sitemap.xml и robots.txt

@HelloMark · Регистрация: 31.08.2014

Студворк — интернет-сервис помощи студентам

У нас сайт, который тянет товары от поставщика (с его разрешения) в раздел /x/. Так получилось, что гугл выкинул нас с выдачи результатов. Видимо посчитав плагиатом.

Подскажите:
1. Если запретить в роботс /x/ Гугл перестанет сканировать раздел.
2. Если запретить в sitemap.xml добавление обновлений из /x/

При 1, есть ли смысл использовать 2, или поисковик не будет в любом случае из карты тянуть, если в роботс запрещено?
Имеет ли смысл отключать добавление в карту (автодобавление всех новых данных установлено сейчас) из раздела Х? Как вообще поисковик реагирует на это?
Как вообще лучше поступить? 1, 1+2, 2?

Есть ли способ объяснить поисковику, что это не плагиат, а техническая информация, которая по сути не может быть плагиатом и тянется на партнеских условиях?

@abler98 · 25.02.2015, 01:11

Разделом ошиблись

@Academik · 25.02.2015, 01:33

HelloMark, закрывайте от индексации и не включайте эти страницы в sitemap.

@pyramida · 25.02.2015, 02:14

Сообщение от HelloMark

Так получилось, что гугл выкинул нас с выдачи результатов. Видимо посчитав плагиатом.

Урл сайта в ЛС покажите.

Сообщение от HelloMark

1. Если запретить в роботс /x/ Гугл перестанет сканировать раздел.

перестанет. Но из индекса не выкинет. Нужно использовать метатеги.

Новые блоги и статьи Все статьи Все блоги /
Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL_LoadPNG (без SDL3_image) 8Observer8 28.01.2026 Содержание блога SDL3 имеет собственные средства для загрузки и отображения PNG-файлов с альфа-каналом и базовой работы с ними. В этой инструкции используется функция SDL_LoadPNG(), которая. . .	Загрузка PNG с альфа-каналом на SDL3 для Android: с помощью SDL3_image 8Observer8 27.01.2026 Содержание блога SDL3_image - это библиотека для загрузки и работы с изображениями. Эта пошаговая инструкция покажет, как загрузить и вывести на экран смартфона картинку с альфа-каналом, то есть с. . .	влияние грибов на сукцессию anaschu 26.01.2026 Бифуркационные изменения массы гриба происходят тогда, когда мы уменьшаем массу компоста в 10 раз, а скорость прироста биомассы уменьшаем в три раза. Скорость прироста биомассы может уменьшаться за. . .	Воспроизведение звукового файла с помощью SDL3_mixer при касании экрана Android 8Observer8 26.01.2026 Содержание блога SDL3_mixer - это библиотека я для воспроизведения аудио. В отличие от инструкции по добавлению текста код по проигрыванию звука уже содержится в шаблоне примера. Нужно только. . .
Установка Android SDK, NDK, JDK, CMake и т.д. 8Observer8 25.01.2026 Содержание блога Перейдите по ссылке: https:/ / developer. android. com/ studio и в самом низу страницы кликните по архиву "commandlinetools-win-xxxxxx_latest. zip" Извлеките архив и вы увидите. . .	Вывод текста со шрифтом TTF на Android с помощью библиотеки SDL3_ttf 8Observer8 25.01.2026 Содержание блога Если у вас не установлены Android SDK, NDK, JDK, и т. д. то сделайте это по следующей инструкции: Установка Android SDK, NDK, JDK, CMake и т. д. Сборка примера Скачайте. . .	Использование SDL3-callbacks вместо функции main() на Android, Desktop и WebAssembly 8Observer8 24.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .	моя боль iceja 24.01.2026 Выложила интерполяцию кубическими сплайнами www. iceja. net REST сервисы временно не работают, только через Web. Написала за 56 рабочих часов этот сайт с нуля. При помощи perplexity. ai PRO , при. . .

@HelloMark 1 / 1 / 0 Регистрация: 31.08.2014 Сообщений: 17

	Sitemap.xml и robots.txt 24.02.2015, 21:55. Показов 3419. Ответов 3 Метки нет (Все метки) У нас сайт, который тянет товары от поставщика (с его разрешения) в раздел /x/. Так получилось, что гугл выкинул нас с выдачи результатов. Видимо посчитав плагиатом. Подскажите: 1. Если запретить в роботс /x/ Гугл перестанет сканировать раздел. 2. Если запретить в sitemap.xml добавление обновлений из /x/ При 1, есть ли смысл использовать 2, или поисковик не будет в любом случае из карты тянуть, если в роботс запрещено? Имеет ли смысл отключать добавление в карту (автодобавление всех новых данных установлено сейчас) из раздела Х? Как вообще поисковик реагирует на это? Как вообще лучше поступить? 1, 1+2, 2? Есть ли способ объяснить поисковику, что это не плагиат, а техническая информация, которая по сути не может быть плагиатом и тянется на партнеских условиях? 0

@abler98 8 / 8 / 5 Регистрация: 24.09.2014 Сообщений: 62
	25.02.2015, 01:11
	Разделом ошиблись 0

@Academik 1030 / 682 / 297 Регистрация: 04.04.2013 Сообщений: 2,751
	25.02.2015, 01:33
	HelloMark, закрывайте от индексации и не включайте эти страницы в sitemap. 0