در سال 2000 حدود يكصدميليون پايگاه وب بر روي شبكه جهاني اينترنت
وجوددارد و پيش بيني مي شود كه تنها پس از گذشت 2 سال ، در سال 2002
به 250 ميليون پايگاه برسد. با رشد تصاعدي حجم اطلاعات ، يافتن
اطلاعات موردنظر در اين درياي پهناور كار مشكلي است و بكارگيري
ابزارهاي جستجوي مناسب يكي از ضروريات كار باشبكه مي باشد.
موتورهاي جستجو از سال 1994
مورداستفاده قرار گرفتند. در ابتدا فعاليت آنها فقطجستجو در وب بود
ولي با گذشت زمان ، خدمات ديگري از جمله فروش كالا، اجاره فضاي وب و
پست الكترونيك ، تحليل سايتها و... به فعاليت آنها اضافه شد.