Cara Setting Robots.Txt 100% SEO - Robots.txt ini berisi panduan atau setting untuk Robot tentang bagaimana mereka akan crawler dan mengindeks website atau blog anda, jadi blogger menyediakan setting custom untuk mengatur beberapa setting SEO yang sangat mendasar dan sangat. Mudah dari dashboard blog anda. Salah satunya adalah mengatur custom robots.txt untuk blog anda sesuai kebutuhan anda.
Baca juga : Inilah 10 Template Blogger agar cepat diterima adsense Premium Gratis 2018
Pada dasarnya setiap blog dari platfrom blogger memiliki setting default robots.txt, namun dengan perubahan baru di blogger ini anda bisa mengubahnya sesuai kebutuhan, nah .. untuk itu di posting ini anda akan tahu tentang bagaimana cara setting default robots.txt dan bagaimana cara menambahkannya. Atau edit robots.txt khusus untuk blog Anda.
Baca juga : 12 Jenis Artikel /Postingan sangat penting yang sering dicari orang di google | Jenis Blog Yang Paling Banyak Dikunjungi 2018
Ini adalah pengaturan default Robots.Txt:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: / search
Allow: /
Sitemap: http://www.newbietechnoo.blogspot.com/feeds/posts/default?orderby=UPDATED
Untuk memeriksa Robot.Txt yang sedang Anda gunakan: ( http://Name-Your-Blog.blogspot.com/robots.txt )
Ubah setting default pada Robot.Txt untuk ini:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: / search
Disallow: / p / *
Disallow: / view / *
Disallow: /? M = 1
Disallow: /? M = 0
Disallow: / *? M = 1
Disallow: / *? M = 0
Allow: /
Sitemap: http://www.nama-url-blog/feeds/posts/default?orderby=UPDATED
User-agent: Mediapartners- Google
Disallow: Baris ini menunjukkan bahwa crawler bot ada di perintah untuk merangkak atau ke crawler adsense. Jika sudah punya iklan Adsense; Baris ini sangat bagus untuk, untuk crawler adsense dan untuk mengunjungi semua halaman situs anda sesuai dengan panduan adsense, untuk baris ini lebih baik di Terapkan.
User-agent: * Baris ini digunakan untuk bot untuk merayapi semua situs dari halaman blog Anda (kecuali untuk pengaturan terpisah di bawahnya, apakah itu harus diindeks atau diblokir dalam penambahan kode di bawahnya, Kode yang Anda terapkan.
Disallow: / search Baris ini menunjukkan bahwa setiap halaman / pencarian dalam bentuk URL tidak akan dijelajahi dan diindeks oleh crawler bot. Baris ini sangat penting untuk membuat blog SEO Anda, seperti tidak akan merangkak atau tidak akan mengindeks halaman Label dan Archive. Karena halaman bukan halaman unik atau URL yang bisa di index dan juga untuk menghindari duplikat konten di blog anda.
Disallow: / p / * Baris ini berfungsi untuk memblokir robot merayapi halaman blog Anda.
Tapi jika Anda ingin agar halaman Anda tetap terindeks oleh crawler, mohon hapus baris ini.
Disallow: / view / * Baris ini berfungsi untuk menghentikan robot merangkak dari halaman blogger dengan tampilan dynamic link. Jika Anda menggunakan tampilan dinamis di blog Anda, maka Anda bisa menghapus baris ini tapi jika Anda tidak menggunakannya silakan tinggalkan saja.
Disallow: /? M = 1
Disallow: /? M = 0
Disallow: / *? M = 1
Disallow: / *? M = 0 = > Baris ini berfungsi untuk menghentikan robot merayapi laman redirect ke ponsel atau tampilan ponsel.
Baca juga : Cara Meningkatkan Traffic Blog Melalui Twitter
Jika Anda tidak menggunakannya maka Anda mungkin melihat blog dengan link dalam tampilan ponsel * * M = 1 atau * M = 0 baris diperlukan untuk menghindari masalah halaman duplikat.
Jika Anda tidak memiliki masalah ini atau jika Anda tidak memerlukannya, Anda dapat menghapusnya.
Baca juga : Inilah 10 Template Blogger agar cepat diterima adsense Premium Gratis 2018
 |
| Cara Setting Robots.Txt 100% SEO |
Baca juga : 12 Jenis Artikel /Postingan sangat penting yang sering dicari orang di google | Jenis Blog Yang Paling Banyak Dikunjungi 2018
Ini adalah pengaturan default Robots.Txt:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: / search
Allow: /
Sitemap: http://www.newbietechnoo.blogspot.com/feeds/posts/default?orderby=UPDATED
Untuk memeriksa Robot.Txt yang sedang Anda gunakan: ( http://Name-Your-Blog.blogspot.com/robots.txt )
Ubah setting default pada Robot.Txt untuk ini:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: / search
Disallow: / p / *
Disallow: / view / *
Disallow: /? M = 1
Disallow: /? M = 0
Disallow: / *? M = 1
Disallow: / *? M = 0
Allow: /
Sitemap: http://www.nama-url-blog/feeds/posts/default?orderby=UPDATED
User-agent: Mediapartners- Google
Disallow: Baris ini menunjukkan bahwa crawler bot ada di perintah untuk merangkak atau ke crawler adsense. Jika sudah punya iklan Adsense; Baris ini sangat bagus untuk, untuk crawler adsense dan untuk mengunjungi semua halaman situs anda sesuai dengan panduan adsense, untuk baris ini lebih baik di Terapkan.
User-agent: * Baris ini digunakan untuk bot untuk merayapi semua situs dari halaman blog Anda (kecuali untuk pengaturan terpisah di bawahnya, apakah itu harus diindeks atau diblokir dalam penambahan kode di bawahnya, Kode yang Anda terapkan.
Disallow: / search Baris ini menunjukkan bahwa setiap halaman / pencarian dalam bentuk URL tidak akan dijelajahi dan diindeks oleh crawler bot. Baris ini sangat penting untuk membuat blog SEO Anda, seperti tidak akan merangkak atau tidak akan mengindeks halaman Label dan Archive. Karena halaman bukan halaman unik atau URL yang bisa di index dan juga untuk menghindari duplikat konten di blog anda.
Disallow: / p / * Baris ini berfungsi untuk memblokir robot merayapi halaman blog Anda.
Tapi jika Anda ingin agar halaman Anda tetap terindeks oleh crawler, mohon hapus baris ini.
Disallow: / view / * Baris ini berfungsi untuk menghentikan robot merangkak dari halaman blogger dengan tampilan dynamic link. Jika Anda menggunakan tampilan dinamis di blog Anda, maka Anda bisa menghapus baris ini tapi jika Anda tidak menggunakannya silakan tinggalkan saja.
Disallow: /? M = 1
Disallow: /? M = 0
Disallow: / *? M = 1
Disallow: / *? M = 0 = > Baris ini berfungsi untuk menghentikan robot merayapi laman redirect ke ponsel atau tampilan ponsel.
Baca juga : Cara Meningkatkan Traffic Blog Melalui Twitter
Jika Anda tidak menggunakannya maka Anda mungkin melihat blog dengan link dalam tampilan ponsel * * M = 1 atau * M = 0 baris diperlukan untuk menghindari masalah halaman duplikat.
Jika Anda tidak memiliki masalah ini atau jika Anda tidak memerlukannya, Anda dapat menghapusnya.
