Posted by : Budi Haryono Rabu, 25 April 2012

Apa robot.txt? apa fungsi dari robot.txt? bagaimana cara membuat robot.txt? apa perlunya otak-atik robot.txt? wah banyak ya pertanyaannya. Sebagai Noobi saya juga kurang mahir dalam hal robot.txt tapi untuk sekedar berbagi akan saya informasikan tentang Apa robot.txt? apa fungsi dari robot.txt? bagaimana cara membuat robot.txt? apa perlunya otak-atik robot.txt?

ROBOT.TXT

Robot.txt adalah sebuah code berjenis .txt yang ada hampir di setiap root sebuah website. Kita dapat membuat robot.txt menggunakan notepad lalu disimpan dengan nama file robot.txt lalu di upload ke directory public_html website anda

FUNGSI ROBOT.TXT

Fungsi robot.txt banyak sekali tapi pada intinya robot.txt berisi sebuah perintah terhadap robot-robot yang ada. Termasuk juga memberikan perintah index dan noindex, follow dan nofollow pada salah satu halaman atau keseluruhan website anda.

CARA MEMBUAT ROBOT.TXT

Cara membuat robot.txt sangat mudah yakni dengan menggunakan notepad dengan mengisikan beberapa perintah seperti contoh di bawah ini:
User-agent: *
Dissalow: /

Allow: /

Pengertian dari script diatas adalah:
  1. User-agent = berarti jenis robot
  2. Dissalow = perintah memblok robot
  3. Allow = perintah memperbolehkan robot
Kalau di perjelas lagi bisa membuat seperti dibawah ini:
User-agent: namabotDissalow: http://domain.tld/halamanwebsite
Pengertian dari script diatas adalah:
  1. User-agent: namabot = spesifikasi robot
  2. Dissalow: http://domain.tld/halamanwebsite = mengatakan kepada robot untuk tidak mengunjungi halaman tersebut atau bisa juga anda menulis: "noindex: http://domain.tld/halamanwebsite dengan demikian robot tidak akan mengindex halaman yang anda maksud
Masih banyak lagi fungsi dari robot.txt ini yang mungkin hanya di ketahui oleh para webmaster and thank to read Robot.txt, Fungsi Robot.txt dan Cara Membuat Robot.txt

Diberdayakan oleh Blogger.

Popular Post

Archive

Category

- Copyright © Informasi -Metrominimalist- Powered by Blogger - Designed by Johanes Djogan -