的软件程序。由于专门用于检索信息的“机器人”程序象蜘蛛一样在网络间爬来爬去，因此，搜索引擎的“机器人”程序就被称为“蜘蛛”程序。
世界上第一个用于监测互联网发展规模的“机器人”程序是matthewgray开发的artinkoster于1993年10月创建了aliweb，它是archie的http版本。aliweb不使用“机器人”程序，而是靠网站主动提交信息来建立自己的链接索引，类似于现在我们熟知的yahoo。
随着互联网的迅速发展，使得检索所有新出现的网页变得越来越困难，因此，在matthewgray的wanderer基础上，一些编程者将传统的“蜘蛛”程序工作原理作了些改进。其设想是，既然所有网页都可能有连向其他网站的链接，那么从跟踪一个网站的链接开始，就有可能检索整个互联网。到1993年底，一些基于此原理的搜索引擎开始纷纷涌现，其中以jumpstation、the（goto的前身，也就是今天overture），和repository-basedsoftpstation和worm只是以搜索工具在数据库中找到匹配信息的先后次序排列搜索结果，因此毫无信息关联度可言。而rbse是第一个在搜索结果排列中引入关键字串匹配程度概念的引擎。
最早现代意义上的搜索引擎出现于1994年7月。当时michaelmauldin将johnleavitt的蜘蛛程序接入到其索引程序中，创建了大家现在熟知的lycos。同年4月，斯坦福（stanford）大学的两名博士生，davidfilo和美籍华人杨致远（gerryyang）共同创办了超级目录索引yahoo，并成功地使搜索引擎的概念深入人心。从此搜索引擎进入了高速发展时期。目前，互联网上有名有姓的搜索引擎已达数百家，其检索的信息量也与从前不可同曰而语。比如最近风头正劲的google，其数据库中存放的网页已达30亿之巨！
随着互联网规模的急剧膨胀，一家搜索引擎光靠自己单打独斗已无法适应目前的市场状况，因此现在搜索引擎之间开始出现了分工协作，并有了专业的搜索引擎技术和搜索数据库服务提供商。象国外的inktomi（已被yahoo收购），它本身并不是直接面向用户的搜索引擎，但向包括overture（原goto，已被yahoo收购）、looksmart、msn、hotbot等在内的其他搜索引擎提供全文网页搜索服务。国内的百度也属于这一类，搜狐和新浪用的就是它的技术。因此从这个意义上说，它们是搜索引擎的搜索引擎。
萧宸还记得，由互联网市场研究公司score曰前发布的2007年全球十大搜索引擎排名研究报告显示，谷歌继续保持着全球搜索引擎市场第一的地位，其2007年12月份全球搜索引擎市场份额为62.4%。
位列第二的是雅虎公司，其市场份额为12.8%。而华夏的百度跃进到第三位，以全球搜索市场5.2%的份额而超过微软。阿里巴巴搜索引擎排名第十位。
据这家互联网市场研究公司周四发布的研究数字显示，2007年12月份全球总搜索量达到662亿次。微软排名第四，其市场份额为为2.9%。韩国nhn位列第五，市场份额为2.4%。ebay位列第六，市场份额为2.2%。时代华纳网络位列第七，市场份额为1.6%。ask位列第八，市场份额为1.1%。俄罗斯的yandex位列第九，市场份额为0.9%。阿里巴巴搜索引擎位列第十，市场份额为0.8%。
当然，对于score的这份排名研究，也有的公司表示了异议。如yandex新闻服务主任mikhailyshakov表示，该公司真正的全球搜索市场份额比score研究的数字更高。yshakov称，yandex公司2007年12月份的搜索量达到5.66亿次，高于全球总搜索量的0.9%。他说：“据我们估计，2007年我们的总搜索量达到5.87亿次。”yandex曰前发布的财报显示，该公司2006年实现盈利7260万美元，年增长50%。
但这里面最大的问题是，谷歌一家就占据了半壁江山——还是大半壁，而后雅虎和百度又瓜分了不少……然而，如今谷歌和雅虎早已被新澜绝对控股，百度刚刚建立，秦沁那边就已经有了动作，正在准备再一口将这家新公司吃下，如此一来，再加上早就吃下去的易趣搜索，就出现了一个令人震惊的现象，即六七年后，新澜控股下的三大搜索引擎将占据全球82.6%的市场份额，也就是说，全球大约83%的网民都需要通过新澜，才能找到他们需要的网络信息……据说2011年全球网民有15亿，那么也就是说，有大概12.4亿网民都跟新澜密不可分……对于某些人而言，这简直是一件恐怖的事。
萧宸此时倒想不了那么多，他只是心疼自己的新车被人踹了一个大凹，连忙开门下车看了一眼，有些愠怒道：“你这小姑娘