Sitemaps

Apa itu Sitemap?

Sitemap adalah file yang menunjukkan struktur website kepada search engine, yang membantu mereka menemukan crawl dan index semua konten website Anda. Sitemap juga menunjukkan kepada search engine halaman mana di situs Anda yang paling penting.

Tipe Sitemap Website:

• Normal XML Sitemap: Membantu crawl dan index search engine dengan menyediakan URL dan metadata website.
• HTML Sitemap: Menyediakan pengguna dengan daftar halaman penting website untuk memudahkan navigasi.
• Video Sitemap: Berisi metadata video seperti judul, deskripsi, dan URL untuk search engine.
• Image Sitemap: Membantu search engine dengan menyediakan URL gambar serta metadata seperti judul, alt image dan lokasi.
• News Sitemap: Untuk membantu search engine, berisi artikel berita dengan metadata seperti tanggal publikasi dan judul yang disetujui untuk Google News.
• Mobile Sitemap: URL yang didedikasikan untuk perangkat mobile untuk search engine.
• RSS/Atom Feeds: Berfungsi untuk pengguna dan search engine, berisi pembaruan atau posting terbaru di situs.

Mari kita lihat lebih dekat masing-masing dari dua jenis ini.

2 Jenis Sitemap Utama:

XML Sitemap

XML Sitemap adalah format sitemap yang disukai oleh search engine, seperti Google.

XML Sitemap mengandung tiga jenis informasi utama yang dapat diakses oleh search engine:

• Daftar URL yang ingin Anda indeks.
• Atribut “lastmod” menunjukkan kapan URL terakhir diperbarui.
• Atribut “hreflang” yang menunjukkan variasi URL lokal.

Extensible Markup Language (XML) adalah format yang memudahkan search engine crawlers membaca sitemap.

Menurut Google, sitemap cocok untuk website baru dengan sedikit tautan, website besar, dan website dengan arsip yang luas.

Meskipun demikian, sitemap XML dapat bermanfaat bagi setiap website, tidak ada kerugian yang signifikan dari memilikinya, dan hanya membutuhkan waktu beberapa menit untuk membuatnya.

HTML Sitemap

HTML Sitemap dulunya adalah metode populer untuk mempermudah navigasi website dan menyediakan tautan ke semua halaman Anda di satu tempat.

Seperti yang Anda lihat, sitemap HTML adalah halaman standar yang memiliki tautan ke berbagai halaman yang disusun secara hierarkis. 

Namun, beberapa orang di komunitas SEO tetap percaya bahwa sitemap HTML sangat penting.

Faktanya:

HTML Sitemap dapat meningkatkan internal link Anda dan memberikan lapisan navigasi tambahan untuk website yang kompleks dan banyak halaman.

Namun,  jangan gunakan sitemap HTML sebagai pengganti elemen navigasi situs yang baik (seperti menu, footer link, breadcrumbs, kategori, dll).

Dengan kata lain, pengguna tidak memerlukan sitemap untuk menavigasi situs web Anda. 

Mengapa Sitemap Penting?

Search Engine seperti Google, Yahoo, dan Bing mengakses berbagai halaman situs Anda melalui sitemap Anda.

Seperti yang dikatakan Google:

“Jika halaman situs Anda terhubung dengan baik, crawlers website kami biasanya dapat menemukan sebagian besar situs Anda.”

Dengan kata lain: Anda mungkin TIDAK MEMERLUKAN sitemap. Namun, sitemap jelas tidak akan mengganggu upaya SEO (Search Engine Optimization) Anda. Jadi, ada baiknya Anda menggunakannya.

Ada juga beberapa kasus khusus di mana sitemap sangat membantu.

Sitemap juga berguna dalam beberapa situasi.

Misalnya, Google menemukan halaman website sebagian besar melalui tautan. Jika situs Anda baru dan hanya memiliki beberapa external backlink, sitemap akan sangat membantu Google menemukan halaman.

Mungkin juga Anda mengelola website E-commerce berisi 5 juta halaman. Google akan kesulitan menemukan semua halaman kecuali Anda menautkan secara INTERNAL dengan SEMPURNA dan memiliki banyak external link. Di sinilah peran sitemap.

Dengan demikian, cara mengatur sitemap dan mengoptimalkannya untuk SEO adalah sebagai berikut.

Cara Menemukan Sitemap

Berikut ini adalah beberapa metode yang efektif untuk menemukan sitemap website:

#1 Cek secara Manual

Cara termudah untuk menemukan sitemap XML adalah mencarinya secara manual. Dalam kebanyakan kasus, sitemap website akan ditemukan di alamat URL berikut:

https://your-domain.com/sitemap.xml

Cara termudah untuk menemukan sitemap XML adalah mencarinya secara manual. Dalam kebanyakan kasus, sitemap website akan ditemukan di alamat URL berikut:

URL sitemap: https://domain.com/sitemap.xml

Seringkali, terutama pada website yang menggunakan plugin Yoast SEO dan WordPress, Anda akan dibawa ke indeks sitemap (/sitemap_index.xml).

Sitemap Index, seperti yang Anda lihat, adalah file sederhana yang menggabungkan semua sitemap website. (Ya, mungkin ada beberapa sitemap.)

Untuk melihat sitemap yang sebenarnya, cukup klik tautan ke sitemap tertentu dalam indeks.

#2 Operator Pencarian

Operator pencarian adalah frasa atau simbol khusus yang dapat Anda tambahkan ke search query untuk mendapatkan hasil yang lebih spesifik.

Untuk menemukan sitemap website, Anda dapat menggunakan operator pencarian berikut:

• site:your-domain.com filetype:xml
• site:your-domain.com inurl:sitemap
• site:your-domain.com intitle:sitemap

Operator ini dapat digunakan di semua search engine populer, seperti Google, Bing, atau Yahoo.

#3 Robots.txt

File website yang dikenal sebagai Robots.txt memberi tahu search engine crawlers bagian mana dari website yang harus mereka crawl dan mana yang harus dihindari.

Ini harus dimasukkan ke folder utama website Anda: https://your-domain.com/robots.txt.

Jika file robots.txt mematuhi peraturan terbaik, akan terhubung ke sitemap website. Anda dapat menemukan kata “sitemap” di dokumen robots.txt.

Ini akan menjadi tampilan bagian yang menautkan ke sitemap:

Metode Terbaik Sitemap

Buat Sitemap

Langkah pertama Anda adalah membuat sitemap.

Jika Anda menggunakan WordPress, Anda dapat membuat sitemap dengan plugin Yoast SEO.

Salah satu keuntungan utama menggunakan Yoast untuk membuat sitemap XML adalah bahwa sitemap tersebut diperbarui secara otomatis (sitemap dinamis).

Oleh karena itu, setiap kali Anda menambah halaman baru ke website Anda, seperti posting blog atau halaman produk e-commerce, tautan ke halaman tersebut secara otomatis dimasukkan ke dalam file sitemap Anda.

Jika Anda tidak menggunakan Yoast, banyak plugin WordPress lainnya, seperti Google XML Sitemaps, dapat Anda gunakan untuk membuat sitemap.

Bagaimana jika Anda tidak menggunakan WordPress?

Ketika Anda tidak menggunakan WordPress, bagaimana?

Anda tidak perlu khawatir, ada alat pihak ketiga yang dapat Anda gunakan untuk membuat sitemap, seperti XML-Sitemaps.com, yang akan membuat file XML yang dapat Anda gunakan sebagai sitemap Anda.

Namun, saya menyarankan Anda untuk memeriksa sitemap Anda secara manual setelah dibuat.

(Sitemap Anda biasanya ditemukan di https://your-domain.com/sitemap.xml, tetapi ini bergantung pada CMS dan aplikasi yang Anda gunakan untuk membuatnya.)

Sitemap Anda harus mencakup semua halaman situs Anda.

Setelah semua terlihat jelas, Anda dapat mengirimkan sitemap Anda ke Google.

Kirimkan Sitemap Anda ke Google

Untuk mengirimkan sitemap Anda, masuk ke akun Google Search Console Anda.

Selanjutnya, cari “Indexing” dan pilih “Sitemaps” di sidebar.

Jika sitemap Anda telah dikirim, Anda akan melihat daftar “Sitemaps yang Dikirim” di halaman ini.

Namun, untuk mengirimkan sitemap Anda, masukkan URLnya ke dalam kolom berikut.

Dan tekan tombol “Kirim”.

Setelah semuanya diatur, Anda akan mulai melihat detail sitemap Anda di halaman ini di bagian “Sitemaps yang Dikirim”:

Gunakan Laporan Sitemap untuk Menemukan Kesalahan

Setelah Google merayapi sitemap Anda, klik di bawah “Submitted Sitemap”.

Jika Anda melihat pesan “Sitemap indeks diproses dengan sukses”, itu menunjukkan bahwa Google telah berhasil merayapi sitemap Anda.

Setelah Google merayapi sitemap Anda, klik di bawah “Submitted Sitemap”:

Jika Anda melihat pesan “Sitemap indeks diproses dengan sukses”, itu menunjukkan bahwa Google telah berhasil merayapi sitemap Anda.

Selain itu, Anda dapat membuka Coverage Report untuk sitemap Anda dengan mengklik “See Page Indexing”.

Dalam laporan ini, jumlah URL yang ditemukan Google di sitemap Anda dan jumlah halaman yang berakhir di indeks Google ditunjukkan:

Tetapi saya ingin melihat apa yang terjadi di halaman “Not Indexed”.

Ternyata, pesan “Crawled – currently not indexed” dikirim ke 1 URL yang ada di sitemap saya.

Ketika saya melihat URL-nya, saya menemukan bahwa itu adalah halaman yang tidak ingin saya indeks.

Oleh karena itu, saya harus menyingkirkannya dari sitemap saya.

Gunakan Sitemap Anda untuk Menemukan Masalah dengan Pengindeksan

Salah satu hal menarik tentang menggunakan sitemap adalah bahwa sitemap dapat memberikan perkiraan kasar tentang:

• Berapa banyak halaman yang INGIN Anda indeks.
• Berapa banyak halaman yang TELAH diindeks hingga saat ini.

Misalkan sitemap Anda memiliki tautan ke 5.000 halaman.

Namun, situs Anda hanya memiliki 2.000 halaman yang diindeks menurut Google Search Console.

Mungkin ada sejumlah besar duplicate content di antara 5.000 halaman tersebut, yang memungkinkan Google tidak mengindeks semua konten. Ini menunjukkan bahwa ada masalah.

Jumlah halaman situs Anda mungkin melebihi crawl budget Anda.

Sesuaikan Sitemaps dan Robots.txt Anda

Sitemaps dan Robots.txt Anda harus bekerja sama.

Oleh karena itu:

Anda tidak ingin halaman tersebut muncul di sitemap Anda jika Anda memblokir halaman di robots.txt atau menggunakan tag “noindex” pada halaman.

Jika Anda tidak melakukannya, Anda mengirimkan pesan yang tidak jelas kepada Google.

“Halaman ini cukup penting untuk dimasukkan ke dalam sitemap kami,” kata sitemap Anda, tetapi ketika Google bot mendarat di halaman tersebut, mereka diblokir.

Pro Tips Sitemap

Situs yang besar? Pecah Menjadi Sitemap yang Lebih Kecil: Google merekomendasikan untuk memecah sitemap Anda menjadi beberapa sitemap yang lebih kecil jika situs Anda memiliki lebih dari 50 ribu halaman.

Hati-hati dengan Tanggal: URL dalam sitemap Anda memiliki tanggal “last modified” yang terkait dengan mereka.

Saya merekomendasikan untuk mengubah tanggal ini HANYA ketika Anda melakukan perubahan signifikan pada situs Anda (atau menambahkan konten baru ke situs Anda). Jika tidak, Google memperingatkan bahwa memperbarui tanggal pada halaman yang tidak berubah dapat dianggap sebagai taktik spam.

Jangan Khawatir tentang Sitemap Video: Schema video sebagian besar akan menggantikan sitemap video. Sitemap video tentunya tidak akan mengganggu kemampuan halaman Anda untuk mendapatkan video rich snippet, tetapi kerumitannya biasanya tidak sebanding.

Tetap di bawah 50MB: Google dan Bing keduanya memperbolehkan sitemap hingga 50MB. Jadi selama Anda berada di bawah 50MB, Anda sudah aman.

HTML Sitemap: Ini pada dasarnya setara dengan sitemap XML, tetapi untuk pengguna.

Karena Google dan search engine lainnya sekarang bergantung pada sitemap XML, sitemap HTML tidak benar-benar diperlukan. Namun, jika Anda percaya bahwa sitemap HTML bermanfaat bagi human visitors, sitemap HTML mungkin tidak akan mengganggu upaya SEO Anda.

Tips untuk Mengoptimalkan Sitemap

1. Gunakan File XML untuk Menyusun Internal Link dan External Link

Gunakan File XML untuk Menyusun Internal Link dan External Link

File XML terdiri dari daftar URL yang membantu crawlings bot menemukan konten dan jalur di website. Oleh karena itu, menambahkan internal link dan external ke sitemap Anda membantu crawlers website mengetahui halaman yang dianggap penting dan mengurangi jumlah halaman yang tidak relevan. Kejelasan seperti ini meningkatkan keseluruhan kesehatan SEO, yang berdampak positif pada peringkat.

Catatan:

Meskipun XML Sitemap tidak menjamin bahwa halaman website Anda akan diindeks, namun ini dapat meningkatkan kemungkinan bahwa halaman website Anda akan diindeks.

2. Menjaga Root Directory Terorganisir dan Bersih

Root Directory berisi folder dan file lainnya di domain, dan berfungsi sebagai lokasi pusat untuk semua direktori dan file yang membentuk website. Semua permintaan website dimulai dari direktori root.

Meskipun secara teoritis tidak berbahaya untuk memasukkan sitemap Anda di luar direktori root, ini bertentangan dengan protokol yang sudah ada. Sitemap menentukan lokasi file yang dapat ditampung. Terlepas dari kenyataan bahwa mesin pencari mungkin tidak terlalu peduli jika sitemap.xml tidak ada di direktori root.

Hindari membanjiri Root Directory Anda dengan banyak file karena dapat memengaruhi kinerja website Anda.

3. Semua Halaman Website harus dimasukkan ke dalam URL halaman Sitemap

Semua halaman web harus dimasukkan ke dalam URL halaman sitemap.

Seperti yang disebutkan sebelumnya, sitemap berfungsi sebagai jalur untuk bot Google untuk mengakses setiap halaman website, termasuk halaman yang memiliki internal link yang lemah. Menempatkan setiap halaman website dalam file sitemap membantu search engine berkomunikasi dengan website .

Tools untuk Membuat Sitemap dengan Mudah

Jika Anda perlu membuat sitemap dengan cepat, berikut adalah ringkasan tools yang paling mudah digunakan:

• Google Search Console
• Bing Webmaster
• Alat online berbayar seperti Yoast
• Mengambil sitemap dari situs web yang tidak Anda miliki

10 Hal yang Harus Dikecualikan dari Sitemap Anda

Sebagai praktik terbaik, tujuan Anda adalah hanya menyertakan halaman yang relevan dengan SEO dalam sitemap Anda. Ini adalah cara yang disarankan untuk memanfaatkan crawl budget dengan efektif.

Metode ini akan memungkinkan search engine untuk mengoptimalkan pengindeksan website Anda.

Kecualikan hal-hal berikut:

• Duplicate pages
• Paginated pages
• Non-canonical pages
• Archive pages
• Redirected pages (3xx), Missing pages (4xx) and Error pages (5xx)
• Comment URLs
• No-index pages
• Halaman yang Berguna untuk Pengunjung Website tetapi Tidak Berfungsi sebagai Halaman Utama
• Site result search pages
• Shared via email pages

FAQ Sitemap