Benötigt man eine robots.txt – Datei für gutes SEO?

WordPress und die robots.txt-Datei

Standardmäßig bietet WordPress keine robots.txt-Datei an. Verwendet man das Plugin Yoast SEO, wird über die Menüfolge
Werkzeuge->Datei->Editor erkannt, ob in WordPress eine robots.txt – Datei vorhanden ist.

User-agent: *
Disallow: /