Όχι, α ρομπότ. Το αρχείο txt δεν απαιτείται για έναν ιστότοπο. Εάν ένα bot έρθει στον ιστότοπό σας και δεν έχει, απλώς θα ανιχνεύσει τον ιστότοπό σας και θα ευρετηριάσει τις σελίδες σας όπως θα έκανε συνήθως. … το αρχείο txt απαιτείται μόνο εάν θέλετε να έχετε περισσότερο έλεγχο σε αυτό που ανιχνεύεται.
Τι θα συμβεί αν δεν έχετε ρομπότ txt;
ρομπότ. Το txt είναι εντελώς προαιρετικό. Εάν έχετε ένα, οι ανιχνευτές που συμμορφώνονται με τα πρότυπα θα το σεβαστούν, αν δεν έχετε κανένα, όλα όσα δεν επιτρέπονται στα στοιχεία HTML-META (Wikipedia) μπορούν να ανιχνευθούν. Ο ιστότοπος θα ευρετηριαστεί χωρίς περιορισμούς.
Μπορώ να διαγράψω τα robots txt;
Πρέπει να αφαιρέσετε και τις δύο γραμμές από τα ρομπότ σας. txt. Το αρχείο robots βρίσκεται στον ριζικό κατάλογο του φακέλου φιλοξενίας ιστού σας, αυτό συνήθως βρίσκεται στο /public_html/ και θα πρέπει να μπορείτε να επεξεργαστείτε ή να διαγράψετε αυτό το αρχείο χρησιμοποιώντας: FTP χρησιμοποιώντας έναν πελάτη FTP όπως το FileZilla ή το WinSCP.
Είναι τα ρομπότ txt ασφαλή;
Τα ρομπότ. Το txt αρχείο δεν αποτελεί από μόνο του απειλή για την ασφάλεια και η σωστή χρήση του μπορεί να αντιπροσωπεύει καλή πρακτική για λόγους μη ασφαλείας. Δεν πρέπει να υποθέσετε ότι όλα τα ρομπότ Ιστού θα τηρούν τις οδηγίες του αρχείου.
Γιατί τα robots txt είναι κακά;
Απλώς προσθέτοντας μια λίστα διευθύνσεων URL που προορίζονται να είναι ιδιωτικές σε ένα ρομπότ. Το αρχείο txt είναι ένας από τους χειρότερους τρόπους προσπάθειας να κρατήσετε κρυφές διευθύνσεις URL και στις περισσότερες περιπτώσεις, έχει ως αποτέλεσμα ακριβώς το αντίθετο από το επιδιωκόμενο αποτέλεσμα.
