เครื่องมือค้นหาแรกคืออะไร

เสิร์ชเอ็นจิ้นเป็นโปรแกรมคอมพิวเตอร์ที่ทำหน้าที่เป็นวิธีการดึงข้อมูลจากฐานข้อมูลตามเกณฑ์ที่กำหนดโดยผู้ใช้ เอ็นจิ้นการค้นหาสมัยใหม่ฐานข้อมูลการค้นหาที่มีข้อมูลจำนวนมากรวบรวมจากเวิลด์ไวด์เว็บกลุ่มข่าวและโครงการไดเรกทอรี วิวัฒนาการของเสิร์ชเอ็นจิ้นค่อนข้างรวดเร็วโดยมีเสิร์ชเอนจิ้นตัวแรกสุดปรากฏในต้นปี 1990 และเอ็นจิ้นการค้นหาสไตล์โมเดิร์นแรกปรากฏในปี 1995

ก่อนที่จะมีเวิลด์ไวด์เว็บ แต่หลังจากการกำเนิดของอินเทอร์เน็ตและความนิยมในวงจรมหาวิทยาลัยเครื่องมือค้นหาแรกถูกสร้างขึ้น ณ จุดนี้ในประวัติศาสตร์ - ในช่วงปลายทศวรรษ 1980 และต้นปี 1990 - หนึ่งในโปรโตคอลหลักที่ใช้บนอินเทอร์เน็ตคือโปรโตคอลการถ่ายโอนไฟล์ (FTP) เซิร์ฟเวอร์ FTP นั้นมีอยู่ทั่วโลกโดยส่วนใหญ่จะเป็นมหาวิทยาลัยมหาวิทยาลัยศูนย์วิจัยหรือหน่วยงานของรัฐ นักเรียนบางคนที่มหาวิทยาลัย McGill ในมอนทรีออลตัดสินใจว่าฐานข้อมูลส่วนกลางของไฟล์ที่มีอยู่บนเซิร์ฟเวอร์ FTP ยอดนิยมต่างๆจะช่วยประหยัดเวลาและให้บริการที่ยอดเยี่ยมแก่ผู้อื่น นี่คือจุดเริ่มต้นของเครื่องมือค้นหาของอาร์ชี

Archie ซึ่งย่อมาจากไฟล์เก็บถาวรเป็นเอ็นจิ้นการค้นหาที่ลงชื่อเข้าใช้เซิร์ฟเวอร์ FTP ในรายการเป็นประจำและสร้างดัชนีของไฟล์ที่อยู่บนเซิร์ฟเวอร์ เนื่องจากเวลาและแบนด์วิดท์ของตัวประมวลผลยังเป็นสินค้าที่มีค่าพอสมควรอาร์ชีตรวจสอบเฉพาะการอัพเดตทุกเดือนหรือมากกว่านั้น ในตอนแรกดัชนีที่อาร์ชีสร้างขึ้นนั้นถูกตรวจสอบโดยใช้คำสั่ง Unix grep แต่อินเทอร์เฟซผู้ใช้ที่ดีขึ้นได้รับการพัฒนาเพื่อให้ง่ายต่อการค้นหาดัชนี จากการติดตามของอาร์ชีเครื่องมือค้นหาจำนวนหนึ่งก็ผุดขึ้นมาเพื่อค้นหาโพรโทคอลโกเฟอร์ที่คล้ายคลึงกันซึ่งเป็นเครื่องมือค้นหาที่โด่งดังที่สุดสองอันดับคือ Jughead และ Veronica อาร์ชีเริ่มล้าสมัยกับการถือกำเนิดของเวิลด์ไวด์เว็บและเครื่องมือค้นหาที่ตามมา แต่เซิร์ฟเวอร์อาร์ชียังคงมีอยู่

ในปี 1993 ไม่นานหลังจากการสร้างเวิลด์ไวด์เว็บ Matthew Gray ได้พัฒนา World Wide Web Wanderer ซึ่งเป็นเว็บหุ่นยนต์ตัวแรก World Wide Web Wanderer จัดทำดัชนีเว็บไซต์ทั้งหมดที่มีอยู่ในอินเทอร์เน็ตโดยการจับ URL แต่ไม่ได้ติดตามเนื้อหาที่แท้จริงของเว็บไซต์ ดัชนีที่เกี่ยวข้องกับ Wanderer ซึ่งเป็นเครื่องมือค้นหาประเภทแรกเรียกว่า Wandex

อีกไม่กี่โครงการขนาดเล็กอื่น ๆ เติบโตขึ้นหลังจาก Wanderer ซึ่งเริ่มเข้าใกล้เครื่องมือค้นหาที่ทันสมัย สิ่งเหล่านี้รวมถึงเวิร์ลด์ไวด์เว็บหนอนใยแมงมุมที่ใช้ซอฟท์แวร์ Repository (RBSE) และ JumpStation เครื่องมือค้นหาทั้งสามนี้ใช้ข้อมูลที่รวบรวมโดยเว็บโรบอตเพื่อส่งคืนข้อมูลนั้นให้กับผู้ใช้ ถึงกระนั้นข้อมูลก็ถูกส่งคืนโดยไม่ถูกกรองส่วนใหญ่แม้ว่า RBSE จะพยายามจัดอันดับมูลค่าของหน้าเว็บ

ในปี 1993 บริษัท ที่ก่อตั้งโดยนักเรียนสแตนฟอร์ดบางคนชื่อ Excite ได้เปิดตัวสิ่งที่เป็นเครื่องมือค้นหาแรกที่รวมการวิเคราะห์เนื้อหาของหน้าเว็บ ข้อเสนอเริ่มต้นนี้มีไว้สำหรับการค้นหาภายในเว็บไซต์ แต่ไม่ได้ค้นหาเว็บโดยรวม

แม้ว่าในปี 1994 โลกของเครื่องมือค้นหามีการพัฒนาที่สำคัญ บริษัท ที่ชื่อว่า WebCrawler เปิดตัวพร้อมกับเสิร์ชเอ็นจิ้นที่ไม่เพียง แต่บันทึกชื่อและส่วนหัวของหน้าเว็บบนอินเทอร์เน็ต แต่ยังคว้าเนื้อหาทั้งหมดได้ด้วย WebCrawler ประสบความสำเร็จอย่างมาก - ประสบความสำเร็จอย่างมากที่ไม่สามารถใช้ประโยชน์ได้มากเพราะทรัพยากรระบบทั้งหมดถูกใช้งาน

อีกไม่กี่ปีต่อมา Lycos ก็เปิดตัวรวมถึงฟีเจอร์มากมายเช่นเดียวกับ WebCrawler และสร้างมันขึ้นมา Lycos จัดอันดับผลลัพธ์ตามความเกี่ยวข้องและอนุญาตให้ผู้ใช้ปรับแต่งการตั้งค่าจำนวนมากเพื่อให้ได้ผลลัพธ์ที่เหมาะสมยิ่งขึ้น ไลโคสก็มีขนาดใหญ่เช่นกันภายในปีนั้นมีเว็บไซต์ที่จัดเก็บไว้มากกว่าหนึ่งล้านเว็บไซต์และภายในสองปีก็มีจำนวนถึง 60 ล้าน

เครื่องมือค้นหาแรกที่แม่นยำที่สุดคืออาร์ชี อย่างไรก็ตามคนส่วนใหญ่เมื่อพวกเขาพูดถึงเครื่องมือค้นหาหมายถึงบางสิ่งที่แตกต่างจากที่อาร์ชีทำ แม้แต่เสิร์ชเอนจิ้น WWW รุ่นต่อมาก็ยังไม่ผ่านเกณฑ์ที่ทันสมัยของเราจนกว่าการมาถึงของ WebCrawler และ Lycos ซึ่งเป็นเสิร์ชเอ็นจิ้นยุคใหม่ที่แท้จริง