RSS

Info Tentang tag Robot.txt

05 Jan

Sedikit melihat Tentang Robot
Anda dapat menggunakan tag HTML khusus untuk memberitahu robot tidak dapat mengindeks konten halaman, atau tidak memindai untuk link untuk mengikuti.

Sebagai contoh:

Ada dua pertimbangan penting ketika menggunakan robot tag :

Robot * dapat mengabaikan tag Anda. Terutama malware robot yang memindai web untuk kerentanan keamanan, dan pemanen alamat email yang digunakan oleh spammer tidak akan memperhatikan.
* direktif NOFOLLOW hanya berlaku untuk link pada halaman ini. Ini sama sekali kemungkinan bahwa robot bisa menemukan link yang sama pada beberapa halaman lainnya tanpa NOFOLLOW (mungkin pada beberapa situs lain), dan masih tiba di halaman Anda yang tidak diinginkan.

Jangan bingung ini NOFOLLOW dengan rel = “nofollow” atribut link.
Rincian

Seperti robots.txt /, tag META robot secara de-facto standar. Ini berasal dari “burung dari bulu” Pertemuan pada lokakarya pengindeksan 1996 didistribusikan, dan dijelaskan dalam catatan rapat.

Tag META ini juga dijelaskan dalam spesifikasi HTML 4.01, Lampiran B.4.1.

Sisa dari halaman ini memberikan gambaran tentang bagaimana menggunakan robot tag dalam halaman Anda, dengan beberapa resep sederhana. Untuk mempelajari lebih lanjut lihat juga FAQ.
Bagaimana menulis Robot Meta Tag
Dimana menaruhnya

Seperti tag itu harus ditempatkan di bagian HEAD halaman HTML, seperti pada contoh di atas. Anda harus meletakkannya di setiap halaman di situs Anda, karena robot dapat menemukan link yang mendalam untuk setiap halaman di situs Anda.
Apa yang harus dimasukkan ke dalamnya

“NAMA” atribut harus “robot”.

Nilai yang benar untuk atribut “CONTENT” adalah: “INDEX”, “NOINDEX”, “FOLLOW”, “NOFOLLOW”. Beberapa nilai dipisahkan koma diperbolehkan, tapi jelas hanya beberapa kombinasi yang masuk akal. Jika tidak ada tag robot, defaultnya adalah “INDEX, FOLLOW”, jadi tidak perlu untuk mengeja bahwa.
Source Translate :

Advertisements
 

Tags:

Leave a Reply

Fill in your details below or click an icon to log in:

WordPress.com Logo

You are commenting using your WordPress.com account. Log Out / Change )

Twitter picture

You are commenting using your Twitter account. Log Out / Change )

Facebook photo

You are commenting using your Facebook account. Log Out / Change )

Google+ photo

You are commenting using your Google+ account. Log Out / Change )

Connecting to %s

 
%d bloggers like this: