News:

Willkommen im Notebookcheck.com Forum! Hier können sie über alle unsere Artikel und allgemein über Notebook relevante Dinge disuktieren. Viel Spass!

Main Menu

Post reply

The message has the following error or errors that must be corrected before continuing:
Warning: this topic has not been posted in for at least 120 days.
Unless you're sure you want to reply, please consider starting a new topic.
Other options
Verification:
Please leave this box empty:

Shortcuts: ALT+S post or ALT+P preview

Topic summary

Posted by Redaktion
 - July 04, 2019, 18:37:50
Google hat bekannt gegeben, dass die gleichnamige Suchmaschine ab dem ersten September einige Anweisungen in der Robots.txt von Webseiten nicht mehr unterstützen wird. Diese Dateien werden genutzt, um Webcrawlern von Suchmaschinen zu vermitteln, welche Teile der Webseiten relevant sind.

https://www.notebookcheck.com/Google-aendert-Regeln-fuer-die-Robots-txt-und-veroeffentlicht-eigenen-Parser.426978.0.html