Jika kalian menggunakan Sitepad untuk membuat website dan ingin membatasi mesin pencari seperti Google, Bing, Yandex, dan sebagainya, maka kalian bisa menggunakan file bername robots.txt di sitepad, namun karena di dashboard Sitepad tidak ada opsi untuk robots.txt, lalu bagaimana cara mengedit atau menambahkan robots.txt di sitepad?
Sebenarnya secara default sitepad sudah menambahkan file robots.txt dengan konten seperti ini:
User-agent: *Disallow: /site-admin/Allow: /site-admin/admin-ajax.phpNamun seiring berkembang dan kustomisasi yang kalian lakukan pada website, mungkin kalian perlu mengubah isi robots.txt, yang caranya akan kita bahas disini.
KOMENTAR
Memuat...