Sie können Grenzwerte für Seitentiefe und Website-Wechsel angeben, damit z.B. nur Seiten der höchsten Ebene einer externen Website ''gecrawlt'' und Hyperlinks zu anderen Websites nicht verfolgt werden.<ref>{{Literatur|Autoren=Kevin Laahs, Emer McKenna, Veli-Matti Vanamo|Herausgeber=Pearson Deutschland GmbH|Titel=Microsoft SharePoint-Technologien: Planung, Design und Implementierung von Windows SharePoint Services|Verlag=Addison-Wesley-Verlag|Jahr=2006|ISBN=3-8273-2289-8|Online=Zitiert nach {{GBS|L5x-1TQc8kcC|PA154|Hervorhebung="Website gecrawlt"}}}}, Zitat Seite 154.</ref>
{{K|Internet}} mithilfe eines [[Computerprogramm]]s [[Internetseiten]] automatisiert abrufen und verarbeiten