Wie können Suchmaschinen-Bots von der Domain-Restriktion ausgenommen werden?

Im PHP-Beispiel wird mit der Funktion wRequest::isSearchBot() geprüft, ob der Anfragende ein Suchmaschinen-Bot ist. Ist dies der Fall, wird keine Umleitung ausgelöst, um sicherzustellen, dass Suchmaschinen-Crawler alle erforderlichen URLs erreichen und indexieren können ohne Umleitungsschleifen. Die Prüfung erfolgt vor der Weiterleitung und wird entsprechend ausgewertet.