1.3 搜索引擎简史(1)
随着互联网的发展,搜索引擎的出现是必然的。就像传统图书馆一样,收藏的书籍、文件多了,必然出现管理、查找困难,索引和搜索就成为必需的了。实际上,搜索引擎原理在很大程度上源于传统文件检索技术。
网上资源数量远超出我们个人所能想象与掌控,没有搜索引擎,我们几乎无法有效利用这些资源,也就没有互联网的今天。
当今社会化媒体如日中天,诸如Facebook、Twitter等应用的使用人次、网站流量、社会影响力已经达到甚至超过Yahoo!、Google等互联网巨人。有这样一种倾向和观点,网民现在寻找信息更多地是靠Facebook、Twitter,而不是搜索引擎。也许搜索引擎已经过时了?
其实大可不必担心。也许Google、百度会没落,会消失,但搜索引擎不会。就算依靠Facebook、Twitter,或者以后出现的什么新网络服务寻找信息,用户要寻找信息时,一样要在搜索框输入关键词,这还是搜索,只不过搜索信息来源可能从搜索引擎收录的页面数据库变成Facebook、Twitter内部数据库,排名算法从页面相关性、链接变成会员、好友的推荐程度,但数据来源及算法的改变都不能改变用户对搜索的需要,也不会改变搜索的基本形式。
只要搜索存在,就有哪条信息排在前面的问题,就有SEO的存在。也许搜索引擎这个名字变了,SEO也只是需要改个名字而已。
搜索是近20年互联网变化最快的领域之一,这种变化不仅体现在搜索技术突飞猛进和对网络经济的巨大推动上,搜索引擎本身的合纵连横、兴衰起伏也是精彩纷呈,常令人有眼花缭乱、瞠目结舌之感。
了解搜索引擎的发展历史有助于SEO人员理解搜索引擎营销的发展、变革,对未来有更准确的预期。本节就简要列出搜索引擎发展史上的重要事件,其中很多事件对今天搜索以及SEO行业的形态有至关重要的影响。
1990年
第一个互联网上的搜索引擎Archie出现,用于搜索FTP服务器上的文件。当时基于HTTP协议的Web还没有出现。
1993年
6月,第一个Web搜索引擎World Wide Web Wanderer出现,只收集网址,并没有索引文件内容。
10月,第二个Web搜索引擎ALIWEB出现,开始索引文件元信息(也就是标题标签等信息),也还没有索引文件主体内容。
1994年
1月,Infoseek创立,其搜索服务稍后才正式推出。Infoseek是早期最重要的搜索引擎之一,允许站长提交网址是从Infoseek开始的。百度创始人李彦宏就是Infoseek的核心工程师之一。
4月,Yahoo!由David Filo和Jerry Yang(杨致远)创立。当时还没有注册yahoo.com域名,网站建在斯坦福大学的域名上。Yahoo!最初不是真正的搜索引擎,而是人工编辑的网站目录,创始人亲自把收集到的有价值的网站列在Yahoo!目录中。当网站数量还不大时,可以实现人工编辑,既为用户提供方便,又保证了信息质量,Yahoo!迅速成长为网络巨人。
4月,第一个全文搜索引擎(索引文件全部内容)WebCrawler推出。起初是华盛顿大学的一个研究项目。1995年被美国在线AOL收购,1996年又被Excite收购。2001年停止研发自己的搜索技术,网站成为元搜索引擎(整合、显示多个第三方搜索引擎结果,被称为元搜索引擎)。
6月,Lycos创立,迅速成为最受欢迎的搜索引擎之一。
1995年
1月,yahoo.com域名注册。4月,Yahoo!公司正式成立。
12月,Excite搜索引擎正式上线,成为早期流行的搜索引擎之一。2001年其母公司破产,被InfoSpace购买。2004年被Ask Jeeves收购。
12月,AltaVista 创立,迅速成为最受欢迎的搜索引擎,堪称当时的Google。 AltaVista在搜索领域做了很多开创性工作,页面排名以站内因素为主。站长提交网址后收录非常迅速。
12月,Infoseek成为网景浏览器的默认搜索引擎。网景,Netscape,当时浏览器市场的绝对统治者,曾占市场份额的90%以上。后来随着免费的微软IE浏览器推出而衰落,2008年正式停止研发和技术支援。
1996年
3月,Google作为创始人Larry Page和Sergey Brin 在斯坦福大学的研究项目开始,当时的名称是BackRub,2007年才改名为Google。
4月,Yahoo!上市。
5月,Inktomi创立,是早期重要的搜索技术提供商,本身并没有供用户使用的搜索网站或界面,而是专门提供搜索技术给其他公司。Inktomi最先开始付费收录,后来被Google等的成功证明行不通。
5月,Hotbot创立,开始时使用Inktomi数据。1998年被Lycos收购,后来转型为元搜索引擎,显示来自Google、FAST、Teoma和Inktomi的结果。也是初期颇流行的搜索引擎之一。
11月,Lycos收录6千万文件,成为当时最大的搜索引擎。与今天搜索引擎数据库相比,小巫见大巫。