ทูเดย์เรามาเรียนรู้ทำความรู้จักกับ google bot ทั้งสองแบบกันครับ

google bot หรือ spider ของ Google มันมีภารกิจในการวิ่ง หรือไต่ หรือเดิน หรือคลาน (อันนี้ไม่แน่ชัด) ไปตามลิ้งค์เพื่อเก็บข้อมูลตามเว็บเพจต่างๆเข้ามายังฐานข้อมูล index จากนั้นก็จะต้องมีการเปรียบส่วนประกอบของโครงสร้างเเละเนื้อหาในเเต่ละเว็บเพจ เพื่อจัดคำสำคัญๆในเว็บเพจนั้น เพื่อเตรียมพร้อมให้บริการค้นหากับคุณบนเว็บ google อย่างรวดเร็ว เเละสอดคล้องกับการค้นหาของผู้ใช้ Google มากที่สุด googlebot มันมีสองเวอร์ชั่น คือ deepbot เเละ freshbot deepbot google bot เวอร์ชั่นนี้จะเป็นระบบ deep crawler มันชอบเดินทางไกลและชอบสืบหา มันจะขวนขวายอย่างมากในการค้นหาเว็บเพจที่อยู่เเถวบ้านนอกครับ(เว็บที่ไม่เคยจะโปรโมทเลย)ไม่ว่าจะเป็นเว็บเก่าหรือเว็บใหม่ ด้วยการใช้ลิ้งค์เป็นถนนเดินทางไปทั่ว เมื่อมันพบเเล้ว มันก็จะเก็บข้อมูลใหม่ๆที่มันเจอลงใน index ของ Google มันจะทำงานเดือนละครั้งเท่านั้น เเต่ว่ามันจะเริ่มทำงานวันไหนก็แล้วแต่ว่าแต่ละครั้งมันจบงานวันไหน ไม่จำเป็นต้องเป็นวันสิ้นเดือนเสมอไป เเละบางทีอันดับเว็บเพจต่างๆเปลี่ยนไปมาไม่คงที่ ส่วนหนึ่งก็มาจากภารกิจของ deepbot ที่มันพบของใหม่ๆนั่นเอง freshbot เมื่อ Google มีข้อมูลเว็บเพจเเละลิ้งทั้งเก่าเเละใหม่หนาแน่นจากการใช้ deepbot เเล้วที่นี้ก็ต้องต้องทำยังไงให้ indexer มีข้อมูลใหม่ๆสดๆ เช่นเมื่อคืนมีงานเปิดตัว iPhone 5 Google ก็จะต้องอัปเดตให้ทันด้วย คำตอบก็คือใช้ freshbot นั่นเอง freshbot ตัวนี้มันขยันเเละตามกระแส มันจะชอบแวะเวียนไปยังเว็บไซต์ที่มีการอัปเดทบ่อยๆ เพื่อเก็บข้อมูลจากเว็บไซต์เพื่อมาอัปเดท index ให้ทันกระแสโลกนั่นเอง