Fontos változást jelentett be a Google 2019. július 1-én, amit 2019. július 2-án kiegészített, hogy hamarosan változás lesz a robots.txt file-okban kezelt adatokban, mivel számos, eddig sikeresen használt parancsot már nem fog támogatni.
Fontos változást jelentett be a Google 2019. július 1-én, amit 2019. július 2-án kiegészített, hogy hamarosan változás lesz a robots.txt file-okban kezelt adatokban, mivel számos, eddig sikeresen használt parancsot már nem fog támogatni.