Форум программистов, компьютерный форум, киберфорум
Google
Войти
Регистрация
Восстановить пароль
Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.77/13: Рейтинг темы: голосов - 13, средняя оценка - 4.77
33 / 33 / 0
Регистрация: 28.09.2010
Сообщений: 177

robots.txt: google не может проиндексировать сайт

08.03.2011, 18:03. Показов 2569. Ответов 5
Метки нет (Все метки)

Студворк — интернет-сервис помощи студентам
приветствую всех! создал сайт, начал индексировать его в яндекс и появилась проблема с файлом robots, накидал файлы: robots и sitemap (вложил его) разместил в корне сайта своего с яндексом вроде прокатило, принял на индексирование. Теперь появилась проблема с гулом, он не может проиндексировать чтоб разместить рекламму (скрин скинул) Вот что пишет гугл для исправления этой ошибки:
Если Вы хотите дать нашему индексатору доступ к Вашим страницам, Вы можете сделать это не давая доступ другим индексторам. Скопируйте следующие две строчки в верхнюю часть файла robots.txt:

User-agent: Mediapartners-Google*
Disallow:

Это изменение разрешит нашему индексатору просмотреть содержание Ваших страниц и предоставить Вам объявления, "нацеленные" на Ваше содержание.
А как я знаю "User-agent: *" можеть быть в файле только один раз. помогите создать правильный файл robots? (wse-obovsem.ucoz.ru)
Миниатюры
robots.txt: google не может проиндексировать сайт  
Вложения
Тип файла: txt sitemap.txt (267 байт, 99 просмотров)
Тип файла: txt robots.txt (356 байт, 85 просмотров)
0
Programming
Эксперт
39485 / 9562 / 3019
Регистрация: 12.04.2006
Сообщений: 41,671
Блог
08.03.2011, 18:03
Ответы с готовыми решениями:

как проиндексировать сайт в google
Хочу проиндексировать свой сайт www.sewing-world.kharkov.ua в google на другом форуме мне советовали это сделать здесь -...

Как проиндексировать сайт в Google менее, чем за 2
Как проиндексировать сайт в поисковой базе Google менее, чем за 24 часа? Оказаться в базе Google раньше, чем за день - это очень...

Robots.txt и Google
Подскажите плз! Есть сайт, на который направлено два домена (один используемый, другой - нет). В файле robots.txt сразу было...

5
 Аватар для Vovan-VE
13210 / 6599 / 1041
Регистрация: 10.01.2008
Сообщений: 15,069
08.03.2011, 18:08
Code
1
2
User-agent: *
Disallow: /
Вы же запретили всем всё. Такой robots.txt сейчас на сайте имеется.
0
33 / 33 / 0
Регистрация: 28.09.2010
Сообщений: 177
08.03.2011, 18:12  [ТС]
А как быть? я и пробывал онлайн генераторы вот что там выходит:
# Robots.txt file created by http://4seo.biz
# For domain: http://http://wse-obovsem.ucoz.ru/

# main section
User-agent:*
Disallow: //mchat/
Disallow: //search/
Disallow: //informer//
Disallow: //secure//
Disallow: //admin//
Disallow: //panel//
Disallow: //index//
Disallow: //index/8/
# End of main section

# Images section
# End of images section


коментарий "#" вроде не оязательно

Помогите создать robots, а то в пооддержку писать ucoz надо платить 0.5 бакса(((((
0
 Аватар для Vovan-VE
13210 / 6599 / 1041
Регистрация: 10.01.2008
Сообщений: 15,069
08.03.2011, 18:12
Гугловская карта сайта разве допускается в TXT? Насколько я помню, только xml опционально запакованный в gzip.
0
33 / 33 / 0
Регистрация: 28.09.2010
Сообщений: 177
08.03.2011, 18:18  [ТС]
Если посмотреть на скрин там причину пишут типа "Причина блокировки файл robots.txt."
думаю надо добавить

User-agent: Mediapartners-Google*
Disallow:

но это запретит яшке его индексировать(((
0
0 / 0 / 0
Регистрация: 08.01.2011
Сообщений: 8
12.03.2011, 23:31
User-agent может быть в файле сколько угодно раз, тем самым создавая свои правила для разных ПС
попробуйте осилить это - help.yandex.ru/webmaster/?id=996567
0
Надоела реклама? Зарегистрируйтесь и она исчезнет полностью.
inter-admin
Эксперт
29715 / 6470 / 2152
Регистрация: 06.03.2009
Сообщений: 28,500
Блог
12.03.2011, 23:31
Помогаю со студенческими работами здесь

Среди страниц сайта в выдаче google присутствует robots.txt
Всем привет! Среди страниц сайта в выдаче google присутствует "www.###.ru/robots.txt" с тайтлом "User-agent: * Disallow: /js/...

как узнать, что сервер отвечает роботу google при обращении к robots.txt...
... которого на сайте нет? и если сервер отдаёт роботу "200 ОК", может ли это быть причиной непроиндексированности сайта в...

robots.txt - сайт не индексируется
падскажыте что делать я загружаю или редактирую робот , всё равно при просмотре его выбивает User-agent: * Disallow: / памогите...

После снятия запрета в robots.txt не индексируется сайт
Подскажите решение проблемы, На сайте в robots.txt была запись запрещающая сайт к индексации полностью... Я изменила содержание файла...

Может ли Google разиндексировать сайт?
Вообщем пару дней назад http://HeroesV.net.ru в google был проиндексирован(главная страница) за 30 число 12 месяца и 30 страниц с сайта....


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
6
Ответ Создать тему
Новые блоги и статьи
http://iceja.net/ математические сервисы
iceja 20.01.2026
Обновила свой сайт http:/ / iceja. net/ , приделала Fast Fourier Transform экстраполяцию сигналов. Однако предсказывает далеко не каждый сигнал (см ограничения http:/ / iceja. net/ fourier/ docs ). Также. . .
http://iceja.net/ сервер решения полиномов
iceja 18.01.2026
Выкатила http:/ / iceja. net/ сервер решения полиномов (находит действительные корни полиномов методом Штурма). На сайте документация по API, но скажу прямо VPS слабенький и 200 000 полиномов. . .
Расчёт переходных процессов в цепи постоянного тока
igorrr37 16.01.2026
/ * Дана цепь постоянного тока с R, L, C, k(ключ), U, E, J. Программа составляет систему уравнений по 1 и 2 законам Кирхгофа, решает её и находит переходные токи и напряжения на элементах схемы. . . .
Восстановить юзерскрипты Greasemonkey из бэкапа браузера
damix 15.01.2026
Если восстановить из бэкапа профиль Firefox после переустановки винды, то список юзерскриптов в Greasemonkey будет пустым. Но восстановить их можно так. Для этого понадобится консольная утилита. . .
Сукцессия микоризы: основная теория в виде двух уравнений.
anaschu 11.01.2026
https:/ / rutube. ru/ video/ 7a537f578d808e67a3c6fd818a44a5c4/
WordPad для Windows 11
Jel 10.01.2026
WordPad для Windows 11 — это приложение, которое восстанавливает классический текстовый редактор WordPad в операционной системе Windows 11. После того как Microsoft исключила WordPad из. . .
Classic Notepad for Windows 11
Jel 10.01.2026
Old Classic Notepad for Windows 11 Приложение для Windows 11, позволяющее пользователям вернуть классическую версию текстового редактора «Блокнот» из Windows 10. Программа предоставляет более. . .
Почему дизайн решает?
Neotwalker 09.01.2026
В современном мире, где конкуренция за внимание потребителя достигла пика, дизайн становится мощным инструментом для успеха бренда. Это не просто красивый внешний вид продукта или сайта — это. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2026, CyberForum.ru