Belajar Ngeblog

Belajar bersama membuat blog

SEO blog wordpress dengan robots.txt

pa itu file robots.txt dan apa kegunaanya? File ini dipergunakan untuk menginstruksikan para robot mesin pencari untuk dapat menjelajahi/crawled dan mengindex suatu halaman di website kita. Kebanyakan website dan blog mempunyai file dan folder yang tidak relevan untuk mesin pencari (seperti gambar atau file admin) sehingga membuat sebuah file robots.txt dapat benar-benar akan membantu blog kamu berada pada ranking tertinggi di Search Engines (dari Google, Yahoo, MSN dan sebagainya).

File ini sangat mudah untuk dibuat hanya dengan notepad kita sudah dapat memuatnya lalu menguploadnya ke website/blog kamu. Perlu diingat pada saat kamu menkonfigurasi file ini pastikan kalau search engine tidak dapat menjelajahi atau merambah file – file pada blog wordpress kamu. Berikut contoh lengkap dari robots.txt untuk SEO :

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content

User-agent: Mediapartners-Google
Allow: /

User-agent: Adsbot-Google
Allow: /

User-agent: Googlebot-Image
Allow: /

User-agent: Googlebot-Mobile
Allow: /

Sitemap: http://yustian.web.id/sitemap.xml

Semoga bermanfaat.

April 11, 2009 - Posted by | SEO | , , ,

11 Komentar »

  1. Makasi infonya!

    Komentar oleh Dunia Komputer | September 8, 2009

  2. seep…buat rujukan…

    Komentar oleh Karaoke Boy | September 28, 2009

  3. kenapa pada waktu saya pasang meta tag robots.txt pada template saya..pda google webmaster menjadi begini :
    URL restricted by robots.txt
    We encountered an error while trying to access your Sitemap. Please ensure your Sitemap follows our guidelines and can be accessed at the location you provided and then resubmit.
    apa yang harus dilakukan….tlg bales ya..pusing bgt nih..sitemapnya jd eror gara” it…tp sitemap.xmlnya bisa diakses….gmana ya,,,tlg bantu saya donk,,,newbie nih …via neoveneto@gmail.com

    Komentar oleh freezipe | Oktober 11, 2009

  4. Infonya bermanfaat, terima kasih. Salam persahabatan…
    (By: http://ryankharisma88.wordpress.com)

    Komentar oleh ryankharisma88 | November 21, 2009

  5. Thank’s bos….

    BTW, web ane kok lum terindex knp y?

    Komentar oleh wptemplate | November 27, 2009

  6. […] dapat menjelajahi atau merambah file – file pada blog wordpress kamu. Berikut contoh lengkap dari robots.txt untuk SEO […]

    Ping balik oleh SEO Wordpress Untuk Meningkatkan Index Search Engine Dengan Robot.txt « SEO Blog | Desember 3, 2009

  7. ow gitu to caranya,, kan segera ku buat ah,, anyway thx bgt atas infonya

    Komentar oleh fenny | Januari 6, 2010

  8. gimana ya cara ngilangin URL restricted by robots.txt?

    Komentar oleh miss dewi | Februari 15, 2010

  9. info yg keren….
    trims infonya…… klo mo download film gratis klik disini ya….🙂

    Komentar oleh ikhy | Maret 6, 2010

  10. sangat bermanfaat. terima kasih atas infonya.

    Komentar oleh togap | Maret 22, 2010

  11. di cobain dulu bossss

    Komentar oleh portal berita | Juli 23, 2010


Tinggalkan Balasan

Isikan data di bawah atau klik salah satu ikon untuk log in:

Logo WordPress.com

You are commenting using your WordPress.com account. Logout / Ubah )

Gambar Twitter

You are commenting using your Twitter account. Logout / Ubah )

Foto Facebook

You are commenting using your Facebook account. Logout / Ubah )

Foto Google+

You are commenting using your Google+ account. Logout / Ubah )

Connecting to %s

%d blogger menyukai ini: