Robots.txt adalah sebuah file yang sangat berperan dalam SEO yang berguna agar crawler atau spider dari Search Engine dapat meng-index sebuah website. Melalui file ini robot dari search engine mendapat izin file mana yang dapat diakses dan mana yang tidak.
Cara membuat file Robots.txt sangat mudah, tinggal ikuti 3 langkah mudah dibawah ini :
1. Buka Notepad
2. Lalu masukkan script
User-agent: googlebot
Disallow:
User-agent: msnbot
Disallow:
User-agent: yahoo-slurp
Disallow:
User-agent: ia_archiver
Disallow:
User-agent: teoma
Disallow:
Kali ini saya hanya mengizinkan 5 top search engine yaitu Google, MSN, Yahoo, Alexa, Ask, anda bisa menambahkan atau menggantinya sesuai kebutuhan.
Untuk script “Disallow :” anda bisa isi dengan “Disallow : /admin/”, maka robot dari search engine tidak diijinkan untuk mengakses folder admin pada website anda.
3. Lalu save dengan nama robots.txt
Kemudian Upload lah file ini ke folder website anda, missalnya di www.panduanbelajarseo.com/robot.txt, langsung pada folder website publicnya yah.
Semoga bermanfaat yah.
Simak terus panduan belajar seo
Artikel Terkait:
belajar search engine
- Mendapatkan Backlink satu arah (one way backlink) dengan Blog Walking.
- Menaikkan Page Rank Google dengan Back Link
- Off Page SEO (search engine optimization) dengan menggunakan anchor text pada link
- On Page SEO dengan penggunaan Huruf Besar, Huruf Tebal, Huruf Miring, Tanda Kutip pada Kata Kunci
- Teknik On Page SEO dengan menggunakan Alt Tags
- Teknik on page SEO menggunakan H1 dan H2
- Mempromosikan Website Secara Massal
- Onpage Optimization dan Offpage Optimization
- SEO dengan meta tag keyword dan description
artikel seo
- Mendapatkan Backlink satu arah (one way backlink) dengan Blog Walking.
- Menaikkan Page Rank Google dengan Back Link
- Off Page SEO (search engine optimization) dengan menggunakan anchor text pada link
- On Page SEO dengan penggunaan Huruf Besar, Huruf Tebal, Huruf Miring, Tanda Kutip pada Kata Kunci
- Teknik On Page SEO dengan menggunakan Alt Tags
- Teknik on page SEO menggunakan H1 dan H2
- Mempromosikan Website Secara Massal
- Onpage Optimization dan Offpage Optimization
- SEO dengan meta tag keyword dan description
optimasi seo
- Mendapatkan Backlink satu arah (one way backlink) dengan Blog Walking.
- Menaikkan Page Rank Google dengan Back Link
- Off Page SEO (search engine optimization) dengan menggunakan anchor text pada link
- On Page SEO dengan penggunaan Huruf Besar, Huruf Tebal, Huruf Miring, Tanda Kutip pada Kata Kunci
- Teknik On Page SEO dengan menggunakan Alt Tags
- Teknik on page SEO menggunakan H1 dan H2
- Mempromosikan Website Secara Massal
- Onpage Optimization dan Offpage Optimization
- SEO dengan meta tag keyword dan description
0 comments:
Post a Comment