Ограничение объёма выборки традиционных поисковых систем
Проведём эксперимент.
На запрос "авто самара", популярная поисковая система выдаёт:

Проявив немного терпения, пролистываем выдачу. На 14 (Четырнадцатой) странице выдача обрывается, а "результатов" остается лишь 127 (Сто двадцать семь) результатов:

Можно доказать, что распределенные поисковые базы этой полнотекстовой поисковой машины содержат полную информацию. Но доказательство этого факта находиться за пределами темы этой статьи. Достаточно того, что мы доказали отсутствие доступа к полной информации.
Узкое место, обстоятельство, закрывающее доступ к полной информации – архитектура полнотекстовых поисковых машин. Структура баз данных оптимизирована таким образом, чтобы выдавать быстрый результат. Длительность выдачи не должна превышать 1 (Одну) секунду. Разумеется, эта быстрота достигается за счет ограничения выборки тем объёмом, который процессор поискового сервера способен обработать менее чем за 1 (Одну) секунду.
Таким образом доказано существование принципиального ограничения на объём информации, который полнотекстовая поисковая машина способна выдать пользователю.
Дата опубликования: 08.04.2025