按键盘上方向键 ← 或 → 可快速上下翻页，按键盘上的 Enter 键可回到本书目录页，按键盘上方向键 ↑ 可回到本页顶部！
————未阅读完？加入书签已便下次继续阅读！
抓取流程？
张伟一时间还是想不到哪个用过的搜索引擎是这样的啊！
如果能够想起来的话，他便可以按照使用过程大致推断出来，然后专业方面交给克里斯等人去完成！
这次出售网景，和以往张伟出售的公司不一样，不仅赚钱更多，更主要的是能得到两个网景重要的部门，这对于以后国内的互联网发展帮助实在太多了，还有一点，要让先锋集团和峡谷资本看到华金资本的能力，这样以后才不会出现新成立的同盟公司出现抢权夺班的事情。
前世用过哪个搜索引擎是这样的呢？
百度、谷歌、雅虎都是传统搜索引擎啊！
就在此时，柳倾城看了看手表，对着瑶瑶说了句，“都八点多了，我们回去睡觉，乖。”
瑶瑶看看她，撅着嘴道：“我还想玩好游戏上网呢。”
柳倾城无奈道：“你上网玩什么？”
瑶瑶眨眨眼道：“发邮件给同学啊，让他们知道我会玩电子邮箱。”
一旁，张伟听了蓦然想起来一个公司——网易！
哈哈！
终于想起来了！
后世的网易搜索不就是开放式目录管理系统的搜索引擎管理模式吗？
第492章 有些人一出生就不一样啊
网易搜索引擎。
在后世拥有国内唯一的互动性开放式目录管理系统！
最关键的是，网易基本搜索的适合，查询结果严谨细致，能帮助用户找到最重要、最相关的内容。例如，当网易搜索对网页进行分析时，它也会考虑与该网页链接的其它网页上的相关内容。网易搜索还会先列出那些搜索关键词相距较近的网页。
而在搜索多个词语的时候，网易搜索只会返回那些符合用户的全部查询条件的网页。不需要在关键词之间加上“and”或“＋”。如果用户想缩小搜索范围，只需输入更多的关键词，只要在关键词中间留空格就行了。
这完全就符合张伟现有需要的条件啊，网易搜索这个名字在后世虽然并不太出名，可是说到另外一个名字相信很多人就能耳熟能详了——有道搜索！
其中有道搜索包括网页搜素、购物搜索、海量词典、视频搜索、图片搜索等一系列，里面的智能结果和精选搜索就是张伟现在想要的模式，他马上回忆起搜索流程，结合自己的猜测。
按照当时搜索时的情况，张伟开始推测，很多部分应该和传统搜索没什么两样，那么新式搜索需要需要根据一定的网页分析算法过滤与主题无关的链接，保留有用的链接并将其放入等待抓取的资源管理器队列，然后，要根据一定的搜索策略从队列中选择下一步要抓取的网页资源，并重复上述过程，直到达到系统的某一条件时停止，另外，所有被抓取的网页西药存贮，再进行一定的分析、过滤，并建立索引，以便之后的查询和检索！
也就是说，前提需要一个自动抓取万维网信息的程序或者脚本。
这些话对于常人来说都是废话，可是张伟知道，对于专业人士就不是废话了！
克里斯等人不就是需要个流程吗？
张伟迅速拿起笔和本子记录了下来，这些根本不用动脑子，因为都是自己亲身经历过的事情，只需要按照步骤稍加添加自己的想法就可以。
瑶瑶玩了会，道：“张伟，你要不要玩电脑？”
“暂时用不上了。”张伟刷刷在本子上写着。
瑶瑶调皮地对着柳倾城做了个鬼脸，“看，张伟不要用，我再玩一会。”
柳倾城哭笑不得道：“你呀你，那就再玩一小会，眼睛离电脑远点。”
瑶瑶啪嗒啪嗒按照鼠标，叫道：“姐姐，你过来教我打字。”
张伟抬头笑道：“原来你不会打字啊？”
一行！
两行！
五行！
他很快就写完了！
心情彻底兴奋了起来，这些东西写出来，估计能帮到克里斯他们的忙吧？张伟期待着！
……
很晚才睡觉。
可是张伟老早就起来了。
再次拉着郑文跑了一圈网景。
刚一走进去，就看见办公区的工作人员都在忙碌，一看见张伟和郑文后，这些员工就问好起来。
“BOSS。”
“郑总。”
“张先生。”
众人都露出了笑容。
正巧，克里斯刚刚过来工作。
张伟微笑道：“你们先忙着，克里斯，你过来一下。”话刚说完，瞧见负责研发这款产品的技术人员都走了进来，他补充了一句，“你们都过来，我和你们说点事情。”
克里斯道：“什么事？我们还要忙着研发产品，昨晚稍微有点眉目。”
罗曼嘿道：“是啊，或许这是一个突破也说不准。”
泰勒打了个哈欠，道：“可把我累坏了，昨晚两点多才睡，清早六点多就爬起来了。”
看得出来大家都非常疲劳。
张伟和郑文对视了一眼，也没有上楼，直接把众人拉到一旁角落的办公桌，又叫人拿来椅子。
众人坐下。
“那我就说一下我猜测的流程，你们听听有什么启发没有。”张伟拿出小本子翻开。
闻言，克里斯一愕。
泰勒也愣了愣。
罗曼和其他人也有些呆。
你说什么？你猜测的流程？这他妈也能猜测啊还能对我们有启发？昨天还说要找人问问，怎么现在又变成你自己猜测了？这么多精英技术人员攻克了许久的都只是稍有眉目而已，你一个连互联网都不懂的人光靠猜测就行了？我去，你以为你是上帝啊？是造物主啊？怎么想都能变成现实？
众人已经全部无语。
克里斯憋了半天，也没好意思说别的，“那你说我们听听。”
张伟也知道他们不相信，道：“反正你们就听听看又没什么损失对不对？”
泰勒难以置信道：“会对我们有启发？”
“应该会有吧。”张伟瞟了眼本子上的文字，说道：“需要根据一定的网页分析算法过滤与主题无关的链接，保留有用的链接并将其放入等待抓取的资源管理器队列。”
郑文不太懂，瞟了瞟众人。
可是眼前这些人懂啊，他们乍一听的感觉……简直惊艳！按照张伟所说的里面包含了三个步骤，一，用户提供种子URL；二，种子URL进入linkbase中新URL队列中；三，调度模块选取url进入到抓取模块的待抓取队列中，大家都是专业人士，一听就知道完全可行啊！张伟这个推测简直太棒了！听着这个推测，他们都面面相觑，怎么这么简单的事情他们就没想到呢？在场十几个精英都没想到的事情，居然让一个不懂网络的人想到了！
克里斯忍不住赞叹道：“好创意！”
张伟笑眯眯道：“我继续说下去，然后根据一定的搜索策略从队列中选择下一步要抓取的网页资源，并重复上述过程，直到达到系统的某一条件时停止，另外，所有被抓取的网页西药存贮，再进行一定的分析、过滤，并建立索引，以便之后的查询和检索。”
克里斯兴奋了起来，道：“那就是抓取模块读取站点的配置文件，可以按照执行的频率进行抓取，等到抓取到结果就返回pipeline接口中，这就是完成了抽取！”
罗曼也道：“然后把新发现的连接在linkbase里面进行dedup，并push到linkbase的新URL模块里面，最后让调度模块选取url进入抓取模块的待抓取队列，之后就能反馈了啊！”
张伟和郑文不懂这些，听得雨里雾里，可是接下来这些专业人士说的话让他们至少明白一点，这个推测可行！
泰勒结结巴巴道：“这……这就是抓取流程了？”
克里斯非常坚定道：“我觉得有百分之八十的成功率！可以试试看！”
听到最专业的克里斯这么说，十几个人都非常惊奇地看了一眼张伟，他们怎么也想不明白，一个网络上的外行，却能大致推算出流程？难道这就是天生的妖孽？怪不得人家十几岁就能执掌庞大的资产！怪不得华金资本被经营的有模有样！上天果然是有区别的，有些人一出生就他妈和别人不一样啊！
第493章 试验结果
克里斯急匆匆去研发室了。
泰勒、罗曼等人也兴匆匆跟着去了。
郑文顿时道：“小伟，你是在想到的？”
“按照传统搜索引擎的流程推测了一下。”张伟谦虚道：“克里斯他们只是身在局中迷而已。”
比尔·彼特摇头道：“怎么可能？我不是在拍你马屁BOSS，关于这个计划克里斯他们已经想了很久，主要难题就是抓取流程，可是这么多天毫无头绪，可你昨天来开了个会，听了一下他们的难题，今天马上就把问题解决了，我不得不说，你能把华金资本打造到现在这个地步不是偶然，怪不得雅虎杨先生和费罗先生会寻求你合作，自然是BOSS你拥有寻常人不及的本领，而且还是让人匪夷所思的本领。”
其中一个男员工插嘴道：“比尔先生说的不错！”
张伟呵呵笑了下，道：“好了，你们别尽是夸我，现在来谈谈下一步该怎么做，公关方面先准备好，还有软文也要写起来，至于软文怎么写你们想一下，反正这一次一定要把网景的声势再次打造起来，等产品做出来以后就开始宣传吧，最好呢，再请点专业人士评估一下公司市值多少，不是那种正经的评估，我的意思就是夸网景多值钱多值钱，这样谈判的时候能占据一些主动。”
他们听得非常仔细，张伟把该注意的地方都说了一遍，这一切的前提是建立在网站导航做出来。
交代完后。
张伟也没有离开，和郑文两人上了顶层总裁办公室，准备今天在这里盯一下进度，看看研发人员有没有实质进展。
等到两人一走，比尔·彼特就道：“你们觉得能做出产品来吗？”
刚才说的员工摇头，“不知道。”
还有个女员工插话道：“研发这么多天没进展，很难说。”
一旁的黑人女员工露出洁白的牙齿道：“我感觉可以，克里斯他们不是很认可BOSS的提示吗？”
“安妮说的有道理。”比尔·彼特笑了起来，“不管怎么说，BOSS能把华金资本带领的这么成功，自然是有真本事的，再则克里斯他们都觉得可行，应该没问题。”
黑人女员工很有信心，“一定能行！”
比尔·彼特道：“等克里斯他们试验一下就知道了。”
这个产品关乎到网景未来的命运，如果卖出去价格高，新东家肯定更重视，毕竟花重金买来的，他们这些人自然牵肠挂肚。
……
另一边。
科研室里。
克里斯带着张伟的提示马上给众技术人员开了一个小型会议，他们都是精英专业人士，只要稍微点播一下就知道下一步该怎么做，反正张伟之前的提示他们觉得非常可行。
开会结束。
克里斯第一个开始输入程序，头也不回道：“你们分步骤试验下，马上汇报给我。”
众人都开始忙碌起来，渐渐地，有人脸上露出了欣喜的表情。
“这……”
“真的有用啊！”
“这些提示简直让我茅塞顿开！”
“和传统搜索引擎原理许多地方都不一样，很难想象这竟然是一个什么都不懂的外行人想出来的啊！这简直让我惊为天人！”
“聪明绝顶！”
“也就是张才能这么厉害！”
“好像这个步骤有点�