Apa sih sebenarnya halaman web yang terindeks dan apa manfaatnya bagi laman web itu?
Jadi Indexing sendiri adalah proses dimana bot dari sebuah search engine yang disebut spider bot atau bot scrapper akan menyimpan, mengorganisir, dan menambahkan halaman-halaman di website ke dalam database serach engine.
Terus apa manfaatnya?, jadi dengan adanya indexing seperti ini maka laman web yang telah di datangi akan lebih mudah muncul di halaman hasil pencarian. Jika laman web muncul di laman pencarian tentu trafic atau jumlah kunjungan ke laman web itu tentu akan meningkat. Pemilik web tentu ingin laman web nya banyak di kunjungi pastinya.
Lalu bagaimana cara agar laman web kita bisa terindeks oleh bot dari search engine?
Secara sederhana ada beberapa hal yang bisa dilakukan untuk laman web dapat terindeks seperti
- Membuat konten yang sesuai dan berkualitas
- Membuat deskripsi yang jelas mengenai web
- Mengatur struktur halaman dalam laman web
- Mengoptimalkan SEO
Untuk mengoptimalkan SEO disini bisa melakukan beberapa hal agar laman web terindex
Mengkonfigurasi file robots.txt
Agar suatu laman web dapat terindex kita perlu sebuah arahan ke bot mengenai apa-apa saja yang bisa diakses ataupun di indeks oleh bot, tujuan dari konfigurasi ini adalah agar bot dengan mudah mengakses dan dapat terarah. Bot yang melakukan indeks ke laman web juga memiliki batasan jadi dengan ini kita dapat menghemat hal itu. Pengaturannya dalam file robots.txt ini bisanya ditandai dengan Allow dan Disallow serta adanya sitemap dalam file ini. Tetapi perlu diingat bahwa penempatan file robots.txt ini harus diletakkan pada root folder dari laman web agar bot dapat dengan mudah mengaksesnya.
Menggunakan meta tag
Meta tag ini di tambahkan pada bagian header di laman web, tujuannya juga mirip seperti konfigurasi file robots.txt yakni memberikan arahan ke bot mengenai laman mana yang dapat di akses atau di indeks oleh bot serach engine.
Selain untuk mengarahkan bot dengan meta tag kita juga bisa mengatur deskripsi yang menjelaskan laman web. Deskripsi ini biasnya ada pada bagian bawah dari judul laman web di halaman hasil pencarian. Meta tag juga bisa digunakan untuk mengatur keyword yang berhubungan dengan laman web, hal ini akan meningkatkan kemungkinan dari laman web anda untuk muncul di halaman hasil pencarian.
Cara - cara diatas memungkinkan laman web anda untuk muncul di halaman hasil pencarian, tetapi karena proses indeks ini dilakukan oleh bot dan bot ini tidak hanya mengecek 1 laman web jadi mungkin perlu waktu untuk laman web kita di hampiri oleh bot ini.
Tetapi ada loh cara untuk mempercepat kemungkinan untuk laman web ini dihampiri oleh bot search engine.
Caranya adalah dengan memanfaatkan tools dari search engine seperti Google Search Consol untuk search engine google atau Bing dengan Bing Webmaster Tool ataupun tools lain dari berbagai jenis search engine.
