Форум программистов, компьютерный форум, киберфорум
Yandex
Войти
Регистрация
Восстановить пароль
 
Рейтинг 4.87/30: Рейтинг темы: голосов - 30, средняя оценка - 4.87
onrhebeom
1

Ограничение на количество страниц в индексе?

21.08.2007, 21:57. Просмотров 5493. Ответов 18
Метки нет (Все метки)

Несколько месяцев уже на ресурсе с более чем 300 000 страниц с информацией (если не учитывать страницы каталога и т.п. сопроводительные страницы) при регулярной индексации не увеличивается количество страниц в индексе. От АПа к АПу это число колеблется между 38 000 и 52 000. В среднем где-то 45 000. Причем создается впечатление, что появляются одни, выкидываются другие. Что, существует ограничение на количество страниц одного ресурса в поисковике?

Писал в саппорт - отписываются что возможно страницы были недоступны при заходах робота. Эта версия не подтверждается - по логам все Ок, и некоторые отданные роботу страницы потом исчезали.

Наблюдается у кого такое? Что с этим можно сделать?
QA
Эксперт
41792 / 34177 / 6122
Регистрация: 12.04.2006
Сообщений: 57,940
21.08.2007, 21:57
Ответы с готовыми решениями:

Уменьшается количество страниц в индексе
В последние две недели количество страниц в индексе Google уменьшается с каждым днем. Замечаю не...

Максимальное количество страниц в индексе равно 1000?
Заходим на Яндекс, набираем "**************" и видим, что под логотипом Я стоит, что "найдено 222...

Как узнать количество страниц в индексе Google & Yandex ?
Как узнать количество страниц в индексе Google & Yandex ? Добавлено через 6 минут Посредством...

с www сайт в google 5000 страниц, без www 220000 страниц в индексе, почему?
Есть сайт, всегда раскручивался по адресу www.shram.kiev.ua <i>Сейчас наблюдаю такую ситуацию по...

18
O btosg ripcam
Регистрация: 11.05.2007
Сообщений: 204
21.08.2007, 22:59 2
когда у меня столько будет страниц тогда отпишу сколько в индекс попадет. а у вас случайно сайт не mail.ru ? и что стоит 2.0 ?
0
Kipnom
Регистрация: 10.11.2006
Сообщений: 237
21.08.2007, 23:13 3
не знаю сколько у меня страниц точно, но в индексе 102000 с копейками, кажды ап - прирост пару тысяч
0
Spuit Emlimleamc
Регистрация: 03.07.2007
Сообщений: 144
21.08.2007, 23:27 4
Ограничения нету. 2 ресурса, 70К и 120К страниц в индесе.
0
&xxx&
Регистрация: 09.06.2007
Сообщений: 283
21.08.2007, 23:41 5
Нет ни каких ограничений!
0
Romem
Регистрация: 12.06.2007
Сообщений: 229
21.08.2007, 23:55 6
Ограничений скорей всего нет, но 300к страниц долго ждать пока все в индекс попадут, да и с индексацией в последннее время известные траблы происходят.
0
Rtuc
Регистрация: 28.02.2006
Сообщений: 1,473
22.08.2007, 00:10 7
Может ссылок на странице много? больше 150 скажем, тогда отваливаться будут
0
onrhebeom
22.08.2007, 00:24 8
Да ладно бы ждать долго - можно и подождать, если положительная динамика наблюдалась бы. А тут то прибавит, то убавит. И так несколько месяцев уже.
Насчет ссылок - имеются ввиду только внешние ссылки или вообще все? Внешних практически нет, за исключением пары счетчиков. А вот внутренних в некоторых разделах много - система навигации такая.
Есть такие наблюдения, что из-за большого числа ссылок на странице она может исчезть из поиска? Но, тогда это ограничение не должно действовать при занесении страницы в индекс, иначе как бы она туда попала?
Rtuc
Регистрация: 28.02.2006
Сообщений: 1,473
22.08.2007, 00:38 9
Именно в сумме, внешних и внутренних
если где-то есть больше 150, скажем 250 там
то точно отвал будет
0
onrhebeom
22.08.2007, 00:52 10
Спасибо, со ссылками похоже на правду. Проверил - отваливаются похоже именно самые насыщенные ссылками разделы. Правда до 150 все же не дотягивают, но 120 вполне реальное число. Возможно барьером является 100 ссылок. Если причина в этом, по как с этим бороться? Просто запретить к индексации лишние ссылки тэгом <noindex> или это вряд-ли поможет и нужно снимать ссылки?
Rtuc
Регистрация: 28.02.2006
Сообщений: 1,473
22.08.2007, 01:06 11
noindex поможет, мне в суппорте говорили что рекомендуют не больше 150, а отваливаются не те страницы на которых ссылки стоят, а все, хз с чем это у них связано
0
Rtuc
Регистрация: 28.02.2006
Сообщений: 1,473
22.08.2007, 01:20 12
Дело не в ограничениях, а в том что у яндекса просто отваливаются куски базы, в конце все вернётся
вы так уверены?
0
_C_I_A_
Регистрация: 11.01.2007
Сообщений: 677
22.08.2007, 01:35 13
Ограничений не чувствовал никогда...есть пара больших ресурсов с постоянно увеличивающимся количеством страниц, про мнение: индексации и 150 ссылок тоже слышал но пока с такой ситуацией не встречался))
0
Jammi Nod
Регистрация: 14.10.2006
Сообщений: 212
23.08.2007, 01:49 14
Несколько месяцев уже на ресурсе с более чем 300 000 страниц с информацией (если не учитывать страницы каталога и т.п. сопроводительные страницы) при регулярной индексации не увеличивается количество страниц в индексе. От АПа к АПу это число колеблется между 38 000 и 52 000. В среднем где-то 45 000. Причем создается впечатление, что появляются одни, выкидываются другие. Что, существует ограничение на количество страниц одного ресурса в поисковике?

Писал в саппорт - отписываются что возможно страницы были недоступны при заходах робота. Эта версия не подтверждается - по логам все Ок, и некоторые отданные роботу страницы потом исчезали.

Наблюдается у кого такое? Что с этим можно сделать?
может быть очень много очень похожих страниц?
у меня было такое: в один ап прибавляет тысячу страниц, в следующий ап их выкидывает. после того как добавил им уникальности, они все попали в индекс и сидят там и по сей день

или может быть контент неуникален?
тогда примерно по той же причине яндекс может выкидывать такой контент.
решение такое же - добавить уникальности на страницы

если же у вас 300тыщ уникальных страниц b-( :\"> тогда дайте мне урл в личку :))
0
onrhebeom
23.08.2007, 02:03 15
C <noindex> попробую и отпишу сюда результаты.

Насчет неуникальности контента - и да и нет. Насколько похожи могут быть страницы разных сайтов, описывающие один и тот же товар? Содержание похожее, окружение разное. Есть один ресурс, отображающий часть этой информационной базы (порядка 30 000 страниц). На нем такой проблемы не наблюдается, все давно проиндексировано. Так что не думаю что проблема в этом.
onrhebeom
14.09.2007, 02:17 16
Результаты нескольких апов обнадеживающие - динамика наблюдается положительная. Можно считать факт выпадения страниц из-за большого количества ссылок доказаным. Лечится <noindex>. <b>Plus</b> - спасибо за помощь.
Spiatia
Регистрация: 06.07.2007
Сообщений: 94
14.09.2007, 02:31 17
<b>amphibian</b>
<b>JackDAripper</b>
Дело не в ограничениях, а в том что у яндекса просто отваливаются куски базы, в конце все вернётся
у меня что-то подобное 2-ой год на одном крупном сайте: в день, когда АП - добавляется 3к новых страниц, на следующий день - 500 каких-то старых страниц вылетает.

прикол в том, что в следующий ап вылетевшие страницы все возвращаются, + снова очередные 3к страниц в индекс добавляются

мер никаких особых не принимал, хороший рост кол-ва страниц в индексе все равно идет, траф с поисковика тоже постоянно растет, так что сильно не волнуют эти осцилляции :)
0
onrhebeom
14.09.2007, 02:45 18
<b>Creoleo</b>, Вы говорите о совершенно других симптомах, не имеющих отношения к описаной проблеме. У Вас присутствует положительная динамика, у меня ее не наблюдалось.
Источник проблемы похоже был найден, о чем здесь и сообщил. Сама проблема довольно специфична - сомневаюсь что наберется много проектов с большим (более сотни) количеством ссылок на страницах.
Spiatia
Регистрация: 06.07.2007
Сообщений: 94
14.09.2007, 03:00 19
<b>amphibian</b>
Почему же, симптомы те же: "впечатление, что появляются одни, выкидываются другие страницы". И ссылок на странице там в среднем 160-180, почти все - внутренние (это форум, посему много разных ссылок :) )
Так что в этом отношении - схоже ;)

Отличие в том, что рост страниц в индексе все равно идет, несмотря на осцилляции. Только поэтому и не прилагал усилий к изменениям.
0
14.09.2007, 03:00
Answers
Эксперт
37091 / 29110 / 5898
Регистрация: 17.06.2006
Сообщений: 43,301
14.09.2007, 03:00

Заказываю контрольные, курсовые, дипломные и любые другие студенческие работы здесь.

Страниц в индексе: 0
В августе были куплены тематические дешёвые ВС linkfeed 150 шт. Было ли у вас такое, что от 150...

кол-во страниц в индексе
Добрый день. нахожусь в некотором затруднении. если смотреть allinurl:www.site.ru/...

в индексе стало "1 страниц"
сабж это бан? или как понимать? насчёт сайта 1 месяц на нём лежал каталог (не в корне а в...

Сколько страниц в индексе?
В панели вебмастера пишется что в индексе 1100 страниц, хотя на сайте более 2k. Проверяя по...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
19
Ответ Создать тему
Опции темы

КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin® Version 3.8.9
Copyright ©2000 - 2020, vBulletin Solutions, Inc.