Как определяется уникальность контента?

Сорри, если баян - не нашел толком ничего.
Всегда интересовало как поисковик определяет уникальность контента? Индексирует страницу, а затем сравнивает ее контент со всеми ранее проиндексироваными страницами?!? С технической точки зрения - каждую новую страницу сравнивать с миллиардами других - это реально разве?

Эээ... ответ будет размером с Большую Советсткую энциклопедию.
Начни с searchengines.ru
и
master-x.com/articles/category/1/

сам когда-то этим заинтересовался и все нашел в гугле
где-то у меня лежит .pdf документ с описанием, если найду - скину

Спасибо, оценил. Если кто выложит линки на толковые статейки (желательно на русском), буду благодарен. Именно как - не нашел.