एक खोज इंजन की सफलता के लिए महत्वपूर्ण खास कार्यक्रम में कहा "" मकड़ियों झूठ - स्वचालित आभासी रोबोटों - जो शब्द है कि एक वेब पृष्ठ या वेबसाइट पर पाया जा सकता है की सूची का निर्माण. वे आमतौर पर एक केंद्रीय कंप्यूटर से बाहर भेजे जाते हैं और लोकप्रिय वेबसाइटों और सर्वर पर भारी अनुभव का इस्तेमाल करना. इस वेब पेज पर मकड़ियों क्रॉल, शब्दों और लिंक सूचीबद्ध (और), और अन्य वेबसाइटों के लिए इन कड़ियों के बाद तो है कि ऑनलाइन उपयोगकर्ताओं को खोजने के लिए पृष्ठों का उपयोग कर सकते हैं they.re की तलाश में एक सूचकांक या कुंजी खोज शब्द "" की सूची बनाना .
इन वर्षों में, खोज इंजन का उन्नयन किया गया है और अपने सिस्टम को बेहतर बनाने के लिए और अधिक सुविधा और अपने उपयोगकर्ताओं के लिए तेजी से प्रतिक्रिया समय प्रदान करने के लिए. एक ऐसी प्रणाली है कि एक पेज के लिए एक मकड़ी कम करने के लिए और सूचकांक आसान बना देता है एक वेब पेज पर "meta-टैग" - कुंजी शब्दों के प्रयोग है.
एक बार में मकड़ियों ने डाटा एकत्र किया है, इन प्रोसेस कर रहे हैं और खोज इंजन द्वारा कि यह आसान करने के लिए लोगों को उन तक पहुँचने के लिए बनाता है एक तरह से संग्रहीत.
यह केवल शब्द है और एक भी, खोज डेटाबेस में यूआरएल पता स्टोर करने के लिए, लेकिन सरल होगा वहाँ कोई रास्ता नहीं है कि एक उपयोगकर्ता, जब नंगे हड्डियों जानकारी देख रही है, जो पृष्ठ अधिक महत्वपूर्ण है पता होगा, या में उसने इस खोज के साथ फिट बैठता मन में.
उदाहरण के लिए, एक "सेब" के लिए सेब पाई के लिए सेब खोजने के लिए खोज हो सकता है बनाने या सेब का एक चित्र. यदि डेटाबेस बस सूची के लिए "सेब" और उनके यूआरएल थे, एक करने के लिए होता उसका कठिन शब्द का वह ढूँढ़ रहा है कि विशिष्ट संदर्भ के लिए स्वयं की खोज.
इस कारण, सबसे खोज इंजन सूचकांक और केवल शब्दों और URL पते से ज्यादा इकट्ठा: उस पन्ने पर विशिष्ट स्थानों में (शीर्षक और उप शीर्षक क्षेत्रों, उदाहरण के लिए) हैं वे मई सूचक शब्दों, meta-टैग, आवृत्ति शब्दों के लिए पृष्ठ, आदि
ताकि के लिए ब्याज की अन्य पन्नों की पहचान करने के लिए खोज कर रहा है गूगल और अन्य खोज इंजन एक निरंतर दौड़ में अवधारणा की तरह अपनी खोज क्षमताओं में सुधार करने के लिए, जो शब्द के साथ एक पन्नों पर सांख्यिकीय विश्लेषण का उपयोग करता है खोज आधारित हैं. एक और तरीका है, प्राकृतिक भाषा लोगों को जहां एक ही रास्ते में एक निविष्टियाँ सवाल वह वार्ता प्रश्न - "क्या एक खोज इंजन है?" उदाहरण के लिए.
(, खोज इंजन) और शब्दों की सूची के माध्यम से जाँच के लिए प्रारंभ बिंदु के रूप में यह क्या उपयोग करता है उदाहरण के सबसे लोकप्रिय खोज इंजन प्राकृतिक भाषा प्रश्न का उपयोग कर AskJeeves.com, कुंजी शब्दों पर जो "zooms" है.