2008年6月29日星期日

个性化搜索引擎时代到来

  大家多少都用过搜索引擎,google、yahoo、baidu还有很多搜索引擎目前都有个特点,就是你和我使用同一个keyword去搜索, 得到的结果将是一样的,但事实上我们两个因为个人性格、爱好、文化背景等不一样,对同样的搜索结果的满意度是不一样的,有没有办法能让搜索引擎自动根据我 们两个之间的这种差异,返回给我们最适合各自的结果呢? 答案是肯定的,这就是个性化搜索,根据不同人的不同特点,提供不同的搜索结果。

  
  传统的搜索引擎根据关键词来创建索引并得到搜索结果,同时根据关键词来提供广告服务,这往往是不够准确的,比如同样搜索hotel,不同的人可能希望 得到的结果是不一样的,有钱人希望得到的是最好的星级酒店,普通老百姓希望得到的是便宜实惠的结果,同样,广告的展现希望更加准确,比如喜欢自驾游的用户 显然应该推荐更多汽车旅馆的广告,而喜欢大海的用户则应该得到更多海边度假酒店的广告。

  目前有不少的搜索引擎已经开始意识到个性化搜索的重要性,并且开始进行了积极的尝试,google提供的history和 personalize服务,就是类似这样的东西,不过和google提供的这种服务一样,各个搜索引擎目前都面临同样的问题,那就是他们大多基于用户所 有的搜索历史来进行个性化分析,这种分析仅仅基于单一的关键词,往往不够准确,理论上应该考虑更多关键词之外的用户特性,比如点击行为,对同样排序结果里 面不同位置的满意度、点击率等因素综合计算。同时,通过用户搜索历史记录来提供个性化搜索服务,将面临侵犯隐私的重大法律障碍,这成为目前各大搜索引擎棘 手的问题。

  我有三个美国的华人朋友,其中一个是麻省理工研修人工智能的博士,7年的博士课程仅3年半就顺利完成,目前已经是美国人工智能领域排名前三位的 科学家之一,他和两位两个朋友一起,近几年来基于他在基因DNA搜索领域的研究成果,开发出一套算法,该算法成功的应用到了传统的互联网搜索引擎上,有效 的实现了个性化搜索,解决了其他搜索引擎面临的问题。

  通过他们的算法,可以实现类似下面的功能:

  • 不同的人搜索同样的关键词,可以根据不同人的各种属性(地域、年龄、性别、爱好、职业、历史搜索…等等)分别得到最适合自己的结果。
  • 可以根据用户各自的差异和特点,提供最适合该用户的广告投放。
  • 可以根据不同的用户特点,划分具有共同爱好、特性的用户群体。

  最关键的一点,他们的这套算法没有任何其他搜索引擎面临的侵犯用户隐私的担忧,这套算法基于人工智能和用户模型来实现,每个用户都会有个初始的 用户模型,该模型会根据用户的各种属性来不断调整,会随着用户长期的使用搜索引擎,查询不同的关键词,点击和收藏不同的结果等event来调整,最后这个 抽象出来的用户模型将非常接近现实中的用户本人,从而达到个性化的目的,而这个过程中,搜索引擎不记录任何用户操作历史。

  我和这三位朋友接触较长一段时间,我协助他们用了近三个月的时间开发出了一个demo的prototype系统,该系统基于抓取Google、 Yahoo的web search和sponsored links结果进行分析,同时使用了简单的MySQL数据存储、Lucene全文检索等技术对他们的核心算法提供外围技术支持,系统除了web界面采用 PHP的Zend Framework外,大部分部件均基于Linux C/C++开发,尤其是和核心算法服务之间的通讯、词表的解析等关键的应用,可以保证系统的性能,目前演示的系统上每一次search请求都会实时从 Google、Yahoo上抓取并实时进行分析和排序,实际生产应用中会考虑应用更多的缓存技术来进一步提高效率,甚至和Google等数据提供商紧密的 合作。

  目前该项目正在美国寻求VC的投资,说实话,经过我的实际使用,我非常看好这个项目,希望真的可以成功。

关于Google的一些收藏

相关资源链接

Google大事记

·1995年3月 谢尔盖-布林和拉里-佩奇在斯坦福大学计算机博士候选人的春季聚会上首次见面。

·1998年9月7日 组建Google公司,位于加州一个车库,有四名员工。

·1999年2-6月 得到Sequoia Capital和Kleiner Perkins Caufield & Byers两家风险投资基金的2500万美元注资。

·2000年5-6月 每天进行1800万次查询,成为最大的互联网搜索引擎,雅虎选择Google作为默认的搜索结果供应商。

·2002年3-4月 推出了Google新闻的测试版。

·2002年9-10月 在全球推出了关键词广告,在英国、德国、法国和日本都能提供关键词广告服务。

·2003年1-6月 收购了Pyra实验室,这是网络出版工具Blogger的创建者。

·2003年5-6月 推出AdSense,这一广告计划能按照网站内容做广告。

·2004年2月 雅虎开始推出自己的搜索技术,淡出Google搜索技术。

·2004年3月31日 宣布了免费电子邮件服务Gmail。

·2004年4月29日 向美国证券交易委员会提交IPO申请文件。

·2004年8月19日 以100.01美元开盘,比IPO价格上涨18%。

·2005年5月,Google宣布李开复加盟,任中国区总裁,Google中国公司开始启动.

·2006年4月,Google中文改名"谷歌".

最后的欧洲杯


下一界欧洲杯又要4年后了,今天期待着德国的胜利!!
下面是Google的doodle。

【分享】经典网语

刚收到T给我发的邮件,太NB了,分享给大伙放松放松。

1、吃自助最高境界:扶墙进,扶墙出。
2、结婚必备条件:有车有房,父母双亡。
3、没有钱,没有权,再不对你好点,你能跟我?
4、拿份报纸上厕所,俺是读书人。
5、上Google上百度一下。
6、女人一定要对自己好一点。一旦累死了,就会有别的女人花你的钱,住你的房,睡你的老公,打你的娃!
7、你的丑和你的脸没有关系……
8、长个包子样,就别怨狗跟着。

9、争吵的时候,男人和女人的区别就像步枪和机关枪的区别。
10、爷爷都是从孙子走过来的……
11、老天,你让夏天和冬天同房了吧?生出这种鬼天气!
12、鸟大了什么林子都有!
13、听说女人如衣服,兄弟如手足。回想起来,咱这尊千手观音竟然裸奔了20多年!
14、不怕虎一样的敌人,就怕猪一样的队友。
15、夏天就是不好,穷的时候我连西北风都没得喝……
16、随你大小便!
17、怀才就像怀孕,时间久了才能让人看出来。
18、没什么事就不要找我,有事了更不要找我。
19、你以为我会眼睁睁地看着你去送死?我会闭上眼睛的。
20、锻炼肌肉,防止挨揍!
21、天使之所以会飞,是因为她们把自己看得很轻……
22、我想早恋,可是已经晚了……
23、拥抱真是个奇怪的东西,明明靠的那么近,却看不见彼此的脸。
24、揍你个性生活不能自理!
25、当你穿上爱情的婚纱,我也披上了和尚的袈裟……
26、其实我是一个天才,可惜天妒英才!
27、请你以后不要在我面前说英文了,OK?
28、思想有多远,你就给我滚多远!
29、男人的谎言可以骗女人一夜,女人的谎言可以骗男人一生!
30、好久没有人把牛皮吹的这么清新脱俗了!
31、老板,钱对你来说真的就那么重要吗?讲了三个多小时了一分钱都不降?
32、起那么早干嘛?夜总会还没开门呢!
33、一觉醒来,天都黑了。
34、我要是做了人事部经理,第一件事就是提拔自己做老总。
35、我每天除了吃饭的时间全在减肥,你还说我没有毅力?
36、水能载舟,亦能煮粥。
37、买了电脑不上宽带,就好比酒肉都准备好了却在吃饭前当了和尚。
38、只要你敢死,我就敢埋!
39、人又不聪明,还敢学人家秃顶?
40、有一个很古老的传说——能在XX校园里看到美女的人会长生不老……
41、如果连你也不理我,我就变成狗不理了……
42、生,容易;活,容易;生活,不容易。
43、打死你我也不会说。
44、钱可以解决的问题都不是问题。
45、念了十几年书,想起来还是幼儿园比较好混!
46、连广告也信,读书读傻了吧?
47、戒烟容易,戒你太难!
48、不吃饱哪有力气减肥啊?
49、睡眠是一门艺术——谁也不能阻挡我追求艺术的脚步。
50、奈何桥上的老婆婆都卖上百事可乐了,你叫我怎么忘记你?
51、早起的鸟儿有虫吃,早起的虫虫被鸟吃。
52、如果我做了皇帝,一定封你当太子。
53、只要锄头舞的好,哪有墙角挖不倒?
54、天哪,我的衣服又瘦了!
55、我在女友手机里的名字是“他”,分手后,我就变成了“它”。
56、避孕的效果:不成功,便成人。
57、我和你不一样,因为我是人。
58、问君能有几多愁,恰似一群太监上青楼。
59、我真想亲口管你爷爷叫声:“爹!”
60、我喝水只喝纯净水,牛奶只喝纯牛奶,所以我很单纯……