Lese ich ein wenig über robots.txt und ich habe gelesen, ich sollte nicht zulassen, alle Ordner in meinem web-Anwendung, aber ich würde gern erlauben bots zu Lesen, Hauptseite und eine Ansicht (url ist zum Beispiel: www.mywebapp/searchresults -