最近我研究 全文搜索引擎的心得(二)
最近我研究 全文搜索引擎的心得(二)
我最近在做搜索引擎最后的一个工序的两个程序(任务调度中心和任务执行)
我现在有 10太工作站,每台上面有 200万笔资料,电脑启动时就加载到内存中,由任务调度中心给他们分配工作任务,执行完毕后由任务中心将结果返回客户端 每个任务调度中心下面可以管理 254个工作站,每个工作站分配 200万笔数据信息,这样一来就可以满足更大数据量的处理了, 同时工作站的数据一开始就在内存中,所以处理起来速度会非常快,我想也许这是最好的方法了, baidu 或 google 也不可能有比这更好的办法了。(也许你会说这家伙太狂了),是的,确实有点。(在这些工作站里面会考虑专门给交费客户专用的工作站,专门用于新闻信息的工作站等划分)
问题点数:1、回复次数:5Top
1 楼keaizhong(可爱钟)(温州的PHPER)(19801010)回复于 2006-03-01 15:52:01 得分 0
去实践了,你得到结果了。。。很让人佩服了。。
等大家都说你是疯子的时候,你仍然能坚持到底,那你离成功也就不远了。。。
祝福你,虽然我一点儿也不懂。Top
2 楼faisun(暖阳)回复于 2006-03-01 17:25:02 得分 0
那内存得多大啊...Top
3 楼gu1dai(异域苍穹.百年飞行)回复于 2006-03-01 17:45:08 得分 0
靠。这么牛。Top
4 楼cao5(草屋主人)回复于 2006-03-01 19:33:12 得分 0
是的,baidu,google他们不会用你你的方法,你的方法对他们来说是不可能的.Top
5 楼datland(天涯剑)回复于 2006-03-01 22:46:57 得分 0
今天有好几个人都要求我去baidu的,还说我要是没有去baidu将是一种遗憾:)
哈哈Top




