Back to Question Center
0

Αντικαταστήστε όλα τα ρομπότ robots.txt

1 answers:

Στα ρομπότ μου Source - web development consultant. txt αρχείο Έχω μια λίστα με ρομπότ που δεν επιτρέπεται να αναπροσαρμόζονται στον ιστότοπό μου και για τα υπόλοιπα πρέπει να επιτρέψω όλα τα άλλα ρομπότ, αλλά θα ήθελα να μάθω την πραγματική διαφορά μεταξύ αυτών των δύο κανόνων:

     User-agent: *
Απαγορεύω:    

και αυτό:

     User-agent: *
Επιτρέψτε: /    
February 13, 2018