Nē, a roboti. txt fails nav nepieciešams vietnei. Ja jūsu vietnē ierodas robots, bet tam nav, tas vienkārši pārmeklēs jūsu vietni un indeksēs lapas kā parasti. … txt fails ir nepieciešams tikai tad, ja vēlaties vairāk kontrolēt to, kas tiek pārmeklēts.
Kas notiks, ja jums nav robotu txt?
roboti. txt ir pilnīgi neobligāts. Ja jums tāds ir, standartiem atbilstošas rāpuļprogrammas to ievēros, ja jums tādas nav, viss, kas nav aizliegts HTML-META elementos (Wikipedia), ir pārmeklējams. Vietne tiks indeksēta bez ierobežojumiem.
Vai varu izdzēst robotu txt?
Jums ir jānoņem abas rindiņas no saviem robotiem. txt failu. Robotu fails atrodas jūsu tīmekļa mitināšanas mapes saknes direktorijā, to parasti var atrast mapē /public_html/, un jums vajadzētu būt iespējai rediģēt vai dzēst šo failu, izmantojot: FTP, izmantojot FTP klientu, piemēram, FileZilla vai WinSCP.
Vai robots txt ir drošs?
Roboti. txt fails pats par sevi nav drošības apdraudējums, un tā pareiza lietošana var būt laba prakse ar drošību nesaistītu iemeslu dēļ. Jums nevajadzētu pieņemt, ka visi tīmekļa roboti ievēros faila norādījumus.
Kāpēc robots txt ir slikts?
Vienkārši pievienojiet to URL sarakstu, kas ir paredzēti kā privāti robotiem. txt fails ir viens no sliktākajiem veidiem, kā mēģināt slēpt vietrāžus URL, un vairumā gadījumu tā rezultātā ir tieši pretējs paredzētajam rezultātam.
