लगभग हर सर्च इंजन वर्ल्ड वाइड वेब को व्यवस्थित तरीके से ब्राउज़ करने और उन्हें लोकल रिपोजिटरी में  अनुक्रमित  करने के लिए _______ नामक प्रोग्राम या स्वचालित स्क्रिप्ट का उपयोग करता है।