Diese Regeln bestimmen, welche Ressourcen im Index ein- oder von ihm ausgeschlossen werden sollen und welche komplexen URLs ...

Diese Regeln bestimmen, welche Ressourcen im Index ein- oder von ihm ausgeschlossen werden sollen und welche komplexen URLs (d.h. URLs, die ein Fragezeichen enthalten) im Index eingeschlossen werden können. Standardmäßig sind alle Ressourcen mit Ausnahme von komplexen URLs im Index eingeschlossen. Regeln können auch angegeben werden, um Konten festzulegen, die beim Zugriff auf bestimmte Pfade verwendet werden.