1. INDEXING
Indexing adalah proses dimana bot dari search engine akan menyimpan, mengorganisir, dan menambahkan halaman-halaman di website ke dalam database search engine, tujuannya adalah agar website yang ada dapat dengan mudah muncul di halaman hasil pencarian (Search Engine Result Page) atau hasil pencarian sesuai dengan isi konten dalam website.
Tetapi ada kalanya kita ingin agar website yang kita miliki tidak ingin muncul di halaman pencarian, hal ini mungkin karena websitenya masih dalam masa development atau websitenya berupa website yang hanya digunakan oleh orang yang miliki aksesnya.
2. KEGUNAAN DOMAIN TIDAK TERINDEX
- Privasi dan Keamanan
- Menghindari duplikasi konten
- Pembatasan akses khusus
- Eksperimen dan Pengujian
- Menghindari spam dan penyalahgunaan
- Fokus pada konten relevan
3. CARA AGAR DOMAIN TIDAK TERINDEX
- File
robots.txt: Menginstruksikan bot mesin pencari untuk tidak menjelajahi atau mengindeks halaman tertentu.
- Meta Tag
noindex: Menambahkan tag khusus di dalam HTML untuk memberi tahu mesin pencari agar tidak mengindeks halaman.
- Pengaturan CMS: Beberapa sistem seperti WordPress memiliki opsi untuk menjadikan situs atau halaman tidak terlihat di mesin pencari.
- Akses Terbatas: Proteksi menggunakan password atau sistem autentikasi untuk membatasi akses publik.
