วันเสาร์ที่ ๔ สิงหาคม พ.ศ. ๒๕๕๐

Path-ascending crawling

มี web crawler บางตัวที่สร้างขึ้นมาเพื่อเก็บข้อมูลทุกประเภทให้มากที่สุดเท่าที่เป็นไปได้
Cothey ได้แสดงวิธี Path-ascending ในปี 2004 ตัวอย่างเช่น
เมื่อเริ่มต้นจะทำการดูดจากเวบเพจ http://llama.org/hamster/monkey/page.html จากนั้นก็จะเริ่มทำการดูด เรียงลำดับดังนี้ /hamster/monkey/, /hamster/, และสุดท้ายที่ root /.
ตัวอย่างของ Web crawler ที่เก็บแหลกเช่น havester

0 ความคิดเห็น: