Кто такие индексы Гугла ?

Их всего два :

1. Основной индекс. Документы, попавшие в него, рейтингуются по различным параметрам, и участвуют в построении серпа. Юзер поисковика, набирая запрос, переходит именно на эти документы.
   
   
2. Дополнительный индекс, он же Supplemental Index (сапплементал, "сопли", и прочие ругательства). Документы, контент которых не представляет никакой ценности, прямиком попадают в Гугловый ад - там они и будут пребывать, пока юзер не наберёт какой-нибудь особо экзотический запрос, для которого не нашлось ответа в документах Гуглового рая, основного индекса.
   
   

Почему плохо, когда документы попадают в дополнительный индекс ?

Ответ очевиден- эти странички почти не получают поискового трафика, так как не попадают в серп по подавляющему большинству поисковых запросов, а потому фактически что они есть в индексе Гугла, что их нет.

Гугл не выбрасывает из своей базы такие странички только потому, что его вычислительные мощности позволяют работать и с этим, дополнительным, индексом не в ущерб основному. Но всё равно надо понимать, что и дополнительный индекс не резиновый, а шансы на окончательное удаление из искалки у всякой странички, попавшей в сапплементал, довольно высоки. Ибо она- почти мусор. В понимании Гугла.

Следует знать, что сегодня в основном индексе Гугла живёт всего 10-20 процентов страниц сайтов. В лучшем случае. Все вспомогательные страницы прямиком направляются в сапплементал, этот Гугловый ад.

Зачем существует дополнительный индекс ?

Так проще. В поиске задействованы документы основного индекса, но для всевозможного ссылочного ранжирования, правильного вычисления ПейджРанка документов, справедливого применения фильтров, и так далее, нужно оперировать знаниями о гораздо большем числе страниц, нежели их сидит в основном индексе.

Благодаря вдесятеро большему дополнительному индексу, Гугл имеет возможность адекватно оценивать заслуги избранных в Гугловый рай документов, и тем самым улучшать качество самого поиска. В силу чего Гугл вне конкуренции- надо будет, он и третий индекс заведёт. Что рано или поздно в том или ином виде непременно случится.