Основные протоколы, используемые в Интернет (в
дальнейшем также Сеть), не обеспечены достаточными встроенными функциями
поиска, не говоря уже о миллионах серверах, находящихся в ней. Протокол
HTTP, используемый в Интернет, хорош лишь в отношении навигации,
которая рассматривается только как средство просмотра страниц, но не их
поиска. То же самое относится и к протоколу FTP, который даже более
примитивен, чем HTTP. Из-за быстрого роста информации, доступной в Сети,
навигационные методы просмотра быстро достигают предела их
функциональных возможностей, не говоря уже о пределе их эффективности.
Не указывая конкретных цифр, можно сказать, что нужную информацию уже не
представляется возможным получить сразу, так как в Сети сейчас
находятся миллиарды документов и все они в распоряжении пользователей
Интернет, к тому же сегодня их количество возрастает согласно
экспоненциальной зависимости. Количество изменений, которым эта
информация подвергнута, огромно и, самое главное, они произошли за очень
короткий период времени. Основная проблема заключается в том, что
единой полной функциональной системы обновления и занесения подобного
объема информации, одновременно доступного всем пользователям Интернет
во всем мире, никогда не было. Для того, чтобы структурировать
информацию, накопленную в сети Интернет, и обеспечить ее пользователей
удобными средствами поиска необходимых им данных, были созданы поисковые
системы.
Поисковые cистемы обычно состоят из трех компонент:
программы собственной разведки: агенты, пауки, боты, кроулеры, которые обследуют Сеть и собирают информацию для нужд поисковой системы;
банк данных, состоящий из множества баз данных, которые содержат всю информацию, собираемую программами - разведчиками;
поисковый механизм и массовый интерфейс, которые люди используют для поиска информации в Интернете.
Знаете ли Вы, что релятивистское объяснение феномену CMB (космическому микроволновому излучению) придумал человек выдающейся фантазии Иосиф Шкловский (помните книжку миллионного тиража "Вселенная, жизнь, разум"?). Он выдвинул совершенно абсурдную идею, заключавшуюся в том, что это есть "реликтовое" излучение, оставшееся после "Большого Взрыва", то есть от момента "рождения" Вселенной. Хотя из простой логики следует, что Вселенная есть всё, а значит, у нее нет ни начала, ни конца... Подробнее читайте в FAQ по эфирной физике.