Googlebot คืออะไร
คงเคยได้ยินเหล่านัก SEO ทังหลายชอบพูดถึง Robots ของ Search Engine ต่างๆ มากมาย
วันนี้ผมอยากพาคุณไปรู้จักกับเจ้า Robot ของ Search Engine ที่ใครๆก็กล่าวขานว่าเป็นอันดับ 1
ของโลก ถ้าเราทำถูกใจมันล่ะก็เว็บดังแน่นอน แน่นอนครับมันคือ Robot ของ google พร้อมแล้ว
มาทำความรู้จักกับมันกันเลยครับ
Googlebot หรือ Googlespider นั้นมีหน้าที่หลักๆ ก็คือการเข้าไป Crawling และทำสำเนาข้อมูลหน้าเพจ
ของเว็บไซต์หรือบล็อกต่างๆ เพื่อใช้ในการทำดัชนี (Index) โดยจะไต่ไปตามลิงค์ต่างๆ ที่มีอยู่ในหน้าเพจ
หรือเว็บไซต์ การทำงานของ Googlebot นั้นจะทำการบันทึก ข้อมูลต่างๆ ที่ได้รับจากหน้าเพจเข้าสู่ฐานข้อมูล
ของ Google Server เพื่อใช้ในการประมวลผลและจัดอันดับตามความเหมาะสม ที่ระบบของGoogle สร้างขึ้นมา
โดยเฉพาะ นอกจากนี้การ รเข้ามาตรวจสอบข้อมูลใหม่ๆ อีกเรื่อยๆ เพื่อทำการบันทึกข้อมูลที่อาจมีการเปลี่ยนแปลง
ในหน้าเพจเก่าที่เคยบันทึกไป แล้วด้วยเช่นกัน นั่นก็แสดงว่าถ้าเราอัพเดทข้อมูลเว็บเราบ่อยๆบอทมันจะเข้ามาเว็บเราบ่อยตาม ไปด้วย
Google Bot หรือ Google Spider นั้นมีด้วยกัน 2 ชนิดหลักๆดังนี้ครับ
Deepbot = ทำงานเพียงเดือนละครั้งเท่านั้น
Freshbot = ทำงานทุกวันตลอด 24 ชั่วโมง
เพื่อเราจะได้เข้าใจกลไกการทำของเขาได้มากยิ่งขึ้นเราลองมาดูคำอธิบายน้อยๆกันข้างล่างครับ
Deepbot
Deepbot เป็น Spider ตัวหนึ่งของ Google ที่มีนิสัยชอบไปไหนมาไหนไกลๆ เป็นนักค้นหาครับเจ้านี้และขยันมากๆ ครับจะค้นทุกอย่างที่ใคร
ต่อใครไม่เคยรู้เจ้า Spider ตัวนี้จะรู้หมดครับ และหาเจอทุกอย่างที่มีอยู่ในโลกออนไลน์ (อันนี้แหละที่แม้แต่ในระบบที่ล็อกอินก็ยังเข้าไปบันทึกได้) เพราะเดินทางไปเรื่อยๆ และก็จะค้นๆๆๆ แม้แต่เว็บที่ไม่เคยมีการโปรโมทเลยเขาก็หาพบ เจ๋งมากๆ ตัวนี้แต่ด้วยเหตุที่เจาะทะลุทะลวง และ เดินทางไกลๆ นี่เองทำให้ Deepbot สามารถทำงานได้ เพียงเดือนละครั้งเท่านั้นครับ โอ้พระเจ้าช่วยตัวนี้เขาแรงจริงๆ
Freshbot
Freshbot จะทำหน้าที่ในการไล่ตรวจข้อมูลเก่าๆ และข้อมูลใหม่ๆ ที่มีการนำเสนอบ่อยๆ เช่นบล็อกต่างๆ รวมไปถึงไปตรวจเว็บที่ Deepbot เคยไปเก็บบันทึกมาอย่างมากมายด้วย ทั้งนี้ Freshbot จะทำหน้าที่ในการตรวจสอบข้อมูลใหม่ๆ ที่เกิดขึ้นในแต่ละวันและขยันมากๆ ครับในแต่ละวันนั้น Freshbot จะเข้าไปตรวจหน้าเพจต่างๆ ทั้งเก่าและใหม่หลายๆ ครั้ง ยิ่งเว็บไหนหรือบล็อกไหนอัพเดทบ่อยๆ ยิ่งไปบ่อยครับนั่นเลยทำให้ได้รับข้อมูลอะไรต่างๆ ที่ใหม่และสดอยู่เสมอนั่นเอง
Googlebot Robots META Tag
สำหรับการใส่ เมต้า แท็ก นั้นก็มีที่เกี่ยวกับ google ดังนี้ครับ
<meta name=”googlebot” content=”noindex”> ใช้สำหรับใส่ในหน้าที่เราไม่ต้องการให้ google มองเพราะเราคงไม่อยากให้ search
แล้วมาเจอหน้า admin ของเรา
<meta name=”googlebot” CONTENT=”nofollow”> “Googlebot” กำหนดเฉพาะ search engine Google เท่านั้น ถ้าต้องการทุกๆ search engine กำหนดเป็น “ROBOTS
<meta name=”googlebot” CONTENT=”index”> เพื่อให้ google ทำการ index มาที่เว็บเรา
<meta name=”googlebot” CONTENT=”follow”> เพื่อให้ Google ทำการ follow มาที่เว็บเรา
และยังมีอย่างอื่นอีกมากมายที่เรายังไม่ได้กล่าวถึงลองเข้าไปดูที่ Webmaster Tools Meta tags ของ Googleซิครับ
การเข้าใจผิดเกี่ยวกับ Googlebot Robots META Tag
คือการเขียน ลักษณะนี้ครับ <meta name=”googlebot” content=”index, follow”>ซึ่งเป็นการเขียนที่ผิดมาตรฐานและไม่จำเป็น มันเป็น
การเพิ่มน้ำหนักไฟล์ของคุณซะมากกว่า อย่าไปเสียเวลาเขียนลักษณะนี้เลยครับ