Τι είναι robots.txt;
robots.txt είναι ένα αρχείο κειμένου που μπορεί να χρησιμοποιηθεί για να περιορίσει την πρόσβαση σε web ρομπότ το web site σας μόνο με τρόπους που έχετε εγκρίνει.
Αυτό το αρχείο robots.txt Imagebot μπλοκ της Google από όλο τον δικτυακό τόπο:
User-agent: Googlebot-Image Απαγόρευση: /
Για περισσότερες πληροφορίες σχετικά με robots.txt, διαβάστε ένα πρότυπο για Ρομπότ Αποκλεισμός.
Ελέγξτε τη σύνταξη του robots.txt
Πολλοί web-based εργαλεία, οι οποίες θα ανακτήσετε το robots.txt αρχείο από το web site σας και να ελέγξετε για σφάλματα σύνταξης.
Bad Robots
Μερικοί ρομπότ θα χρησιμοποιούν μεγάλες ποσότητες εύρους ζώνης και των πόρων συστήματος, ενώ επιστρέφουν ελάχιστα ή δεν πρακτικό όφελος για το web site ιδιοκτήτη.
Για την ευκολία σας, έχουμε μια λίστα με κάποιες από αυτές τις κακές ρομπότ στο robots.txt μορφή.
 |
Bookmark Τι είναι robots.txt;
Τελευταίες θέσεις Blog
- SourceForge έναντι Freshmeat
