Skip to main content

Custom robots.txt pada blogger

robots.txt merupakan sekumpulan kode berbentuk text yang berfungsi sebagai pengatur intruksi pada bot search engine. Hal itu bisa digunakan untuk berinteraksi dengan website atau blog yang anda kelola. Secara pengertian, anda bisa menyebutnya sebagai rangkaian file berbentuk text yang berisi intruksi untuk mem bot saat membuat website yang anda kelola dalam mesin pencarian.
Custom robots.txt pada blogger
Custom robots.txt pada blogger

Cara Menggunakan Custom robots.txt

User-agent: Mediapartners-Google
Kode ini untuk robot Google Adsense yang membantu mereka menampilkan iklan yang lebih baik di blog . Entah kamu menggunakan Google Adsense di blog atau tidak. biarkan begitu saja.

Disallow:
Yang tidak di bolehkan tidak ada.

Disallow: /search
Ini berarti tautan yang memiliki pencarian kata kunci tepat setelah nama domain akan diabaikan. Lihat contoh di bawah ini yang merupakan tautan halaman label bernama SEO.

Dan jika kita menghapus Disallow: / search dari kode di atas maka crawler akan mengakses seluruh blog kita untuk mengindeks dan merangkak semua konten dan halaman webnya.

User-agent: *
Ini untuk semua robots yang ditandai dengan tanda bintang (*). Dalam pengaturan standar, tautan label blog kami dibatasi untuk diindeks oleh crawler pencarian yang berarti crawler web tidak akan mengindeks tautan halaman label.

Allow: /
Yang di ijinkan unutk di rayapi oleh robots.txt tanda / adalah blog kamu.

Sitemap:
Kode ini mengacu pada peta situs blog kita. Dengan menambahkan tautan sitemap di sini kami hanya mengoptimalkan tingkat perayapan blog kami
Berarti kapan pun perayap web memindai file robots.txt kami, mereka akan menemukan jalur ke sitemap kami tempat semua tautan pos yang kami terbitkan hadir. Perayap web akan mudah merayapi semua postingan.
Karenanya, ada peluang yang lebih baik bahwa perayap web merayapi semua posting blog kami tanpa mengabaikan satu pun.
Sekarang bagian utama dari tutorial ini adalah bagaimana cara menambahkan custom robots.txt di blogger. Jadi di bawah ini adalah langkah untuk menambahkannya.

  1. Login ke blogger kamu.
  2. Pilih ke Pengaturan >> Preferensi Penelusuran ›› Perayap dan pengindeksan ›› Robots.txt khusus ›› Edit ›› Ya
  3. Sekarang tempel kode file robots.txt di dalam kotak.
  4. Klik tombol Simpan Perubahan.
  5. Kamu selesai!

Costume robots.txt Blogger yang Aman dan SEO Friendly
Untuk cara pemasangan sama saja dengan di atas.
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /p/about.html
Disallow: /p/contact.html
Allow: /
Sitemap:https://adstriklink.blogspot.com/sitemap.xml
Ganti sitemap dengan alamat blog kamu, robots.txt di atas memberikan perintah untuk tidak mengindek halaman about dan contact.

Cara Memeriksa File Robots.txt

Kamu dapat memeriksa file ini di blog dengan menambahkan /robots.txt di akhir URL blog kamu di browser web. Sebagai contoh: 
https://adstriklink.blogspot.com/robots.txt
Setelah kamu mengunjungi URL file robots.txt  akan melihat seluruh kode yang  gunakan dalam file robots.txt kustom.
Custom robots.txt pada blogger
Custom robots.txt pada blogger

Comments

Popular posts from this blog

Mod ets2 indonesia terbaru dan terlaris sepanjang masa

Kumpulan mod ets2 indonesia terbaru paling banyak dicari Mod ets2 V1.37 bus  Mod ets2 v1.36 truck Mod ets2 V1.35 Map Mod ETS2 V1.30 Map Mod ets2 v1.40 Traffic Mod ets2 V1.38 Trailer Mod ets2 V1.33 Skin livery Mod ets2 v1.31graffic Mod ets2 indonesia full gratis jetbus 3, laksana , adiputro, rahayu sentosa, new armada buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslinks buslin...

Arti robot-txt noindex-nofollow-none-noarchive-nosnippet,-noodp

Custom robots header tags Arti robot.txt noindex,nofollow,none,noarchive,nosnippet,noodp all  - Jika Anda mengatur tag ini, perayap tidak terikat oleh kendala apa pun. Mereka dapat dengan bebas merangkak, mengindeks dan mengekspos  konten Anda . noindex  - Tidak semua blog untuk pemberitahuan publik. Bahkan jika Anda tidak membagikan URL blog pribadi Anda dengan siapa pun, kemungkinan orang akan mendapatkannya dari hasil pencarian. Pada skenario seperti itu, Anda dapat menggunakan tag noindex karena mencegah mesin pencari mengindeks halaman. nofollow  - Tag nofollow dan dofollow adalah untuk tautan keluar. Dofollow adalah tag robot default untuk semua tautan keluar Anda. Itu berarti mesin pencari dapat menyelinap ke halaman yang Anda tautkan. Jika Anda tidak ingin bot pencarian melihat-lihat tautan Anda, penambahan tag nofollow harus membantu Anda. none  - tidak ada yang menggabungkan fitur dari tag noindex dan nofollow. Perayap tidak akan mengindek...

cara seting Custom robots header tags

Pada umumnya semua yang berpengalaman di bidang blog sudah mengenal istilah Robots.txt, dan sebagian orang yang baru terjun di dunia bloging belum mengenal Robots.txt, kali ini vrc memberikan tutorial car mengatur robots.txt tag header, bertujuan untuk  mengindeks blog kita di mesin pencarian dan ini juga teknik untuk mengoptimumkan SEO. Custom Robots Header Tags Blogger   Custom Robots Header Tags Blogger  Jadi robots.txt tag header ini khusus memberikan informasi perayapan google untuk halaman blog kita, dari sisi lain ini penting untuk mempercepat indeksi dan menghilangkan ketidakperluan perayapan yang memungkinkan penolakan indeks dari perayap itu sendiri terhadap laman blogkita. Seperti artikel yang sudah vrc jelaskan mengenai file robots.txt juga berkaitan dengan pengaturan di bagian robots.txt tag header, untuk selanjutnya ikuti step by step agar pengaturan di bagian robots.txt tag header ini dengan benar, ikuti langkah-langkahnya sebagai berikut. 1. Buka...