Panduan Link dan Crawling Agar Website Terindeks Google

Bagaimana caranya agar website anda mudah diindex Google crawler? Pemilik website tentu ingin konten yang telah dibuatnya masuk ke halaman hasil pencarian (SERP) Google. Pelajari panduan lengkap untuk membuat link anda crawlable.

Panduan Link dan Crawling

Proses crawling dimulai dari daftar alamat web dari aktivitas google crawling sebelumnya. Selain itu juga pada peta situs yang dibagikan oleh pemilik situs. Crawler menggunakan tautan pada situs tersebut untuk menemukan halaman website baru.

Anda perlu tahu bahwa Google hanya dapat mendeteksi tautan yang menggunakan tag <a> yang cocok dengan URL. Berikut cmlabs uraikan syarat yang harus diperhatikan agar tautan Anda crawlable.

Menggunakan Tag < a > yang Tepat

Anda harus tahu bahwa Google hanya dapat mengikuti tautan yang menggunakan tag <a> dengan atribut href. Tautan dengan format lain tidak bisa diikuti oleh crawler Google. Google juga tidak dapat mengikuti tautan <a> tanpa tag href atau tag lain yang berfungsi sebagai tautan karena peristiwa skrip. Berikut ini contoh tautan yang dapat dan tidak bisa diikuti oleh Google.

Dapat diikuti:

• <a href=”https://example.com”>
• <a href=”/relative/path/file”>

Tidak dapat diikuti:

• <a routerLink="some/path">
• <span href="https://example.com">
• <a onclick="goto('https://example.com')">

Menautkan ke URL yang Dapat Diselesaikan

Selain syarat penggunaan tag yang tepat, pastikan URL yang ditautkan oleh tag <a> adalah alamat web yang dapat dikirimi permintaan oleh Googlebot. Diantaranya sebagai berikut.

Dapat diselesaikan:

• https://example.com/stuff
• /products
• /products.php?id=123

Tidak dapat diselesaikan:

• javascript:goTo('products')
• javascript:window.location.href='/products'

Itulah dua syarat yang harus dipenuhi agar tautan Anda crawlable.

ROBOT.TXT

File yang digunakan oleh crawler pada halaman website untuk mengetahui file mana yang boleh dan tidak boleh dikunjungi

CRAWLER/SPIDER

Bot milik search engine (contoh, Google) yang menelusuri laman web agar semua konten terindex di database.

Metode Memaksimalkan Crawling Untuk SEO

Agar website muncul di halaman hasil pencarian (SERP), haruslah terindex google terlebih dahulu. Untuk melancarkan proses google crawling, perhatikan poin-poin berikut.

1. Berikan Izin agar Laman Penting dapat Di-crawl Robots.Txt

Robot.txt yang digunakan pada halaman website membuat proses google crawling lebih mudah dan efektif. Anda cukup tambahkan robot.txt ke tools pilihan. Anda dapat memberikan izin atau memblokir crawler di halaman mana pun dari domain dalam hitungan detik.

2. Perhatikan Redirect Code

Di dalam website, sangat mudah untuk menghindari redirect chain di seluruh domain. Namun, kode tersebut selalu dikemas bersama. Akibatnya, membuat batas untuk melakukan crawl karena tidak sampai ke halaman yang di inginkan untuk di indeks.

3. Jangan biarkan kesalahan HTTP Mempengaruhi Crawl

Dalam proses google crawling, masalah 404 dan 410 page sangat mengganggu ketika membuka halaman web. Sebaiknya perbaiki dahulu kode status 4xx dan 5xx karena akan membuat crawl lebih mudah dan akan menguntungkan dalam hal pengindexan laman.

4. Gunakan HTML

Untuk saat ini, performa crawler dinilai lebih bagus dalam melakukan crawl di JavaScript. Namun, disisi lain, masih ada search engine lain yang belum menggunakan JavaScript. Oleh karena itu, usahakan untuk tetap menggunakan HTML ketika melakukan proses google crawling.

5. Merawat Parameter URL

URL yang terpisah dianggap oleh crawler sebagai laman terpisah. Sebaiknya anda memberi tahu google tentang parameter URL. Tujuannya untuk membuat proses goole crawling menjadi lebih efektif, dan juga menghindari kekhawatiran konten duplikat.

6. Perbarui Sitemap

Sitemap yang selalu update membuat bot lebih cepat memahami dan mudah mengidentifikasi kemana tautan internal merujuk. Jangan lupa, pastikan anda telah mengunggah robot.txt versi terbaru.

7. Gunakan Tag Hreflang

Proses google crawling yang dilakukan spider atau crawler menggunakan tag hreflang untuk menganalisis halaman lokal. Tag tersebut biasanya berada di header halaman website dan mendukung kode bahasa “lang_code”.

Gunakan Panduan Crawling untuk Website Anda

WEBSITE AGENSI

Website agensi haruslah dapat diindex google agar tampil di SERP saat dicari klien.

WEBSITE E-COMMERCE

Pastikan website anda muncul di Google ketika customer mencari barang yang anda jual

WEBSITE BRAND

Ketika website brand anda muncul di Google, tidak hanya meningkatkan penjualan tetapi juga online branding

WEBSITE BLOG

Blog bukan hanya tempat mencurahkan pikiran penulis, tetapi juga untuk memberikan informasi bagi siapapun yang mencari.


Baca Blog cmlabs :
Bagaimana cmlabs Mencegah Celah Rencana SEO & Implementasi

Aktivitas SEO Untuk Membantu CSR Perusahaan

Analisa: Klaim Komunitas SEO Tentang Zero-Click