Wie blockiere ich Search Bots vom Zugriff auf Ihre Website?

Um alle Bots daran zu hindern, auf Ihre Seite zuzugreifen, erstellen Sie eine robots.txt -Datei mit folgendem Inhalt:

Benutzer-Agent: *
Nicht zulassen: /

Um zu verhindern, dass alle Bots auf einen bestimmten Ordner zugreifen, wenden Sie den Code wie folgt an: