可是眼前这些懂啊，他们乍一听的感觉简直惊艳！按照张伟所说的里面包含了三个步骤，一，用户提供种子url；二，种子url进1inkbase中新url队列中；三，调度模块选取ur1进到抓龋块的待抓扔列中，大家都是专业士，一听就知道完全可行啊e伟这个推测简直太了｝着这个推测，他们都面面相觑，怎么这么简单的事他们就没想到呢？在钞几个英都没想到的事，居然让一个不懂网络的想到了！

克里斯忍不邹叹道：“好创意！”

张伟笑眯眯道：“我继续说下去，然后根据一定的搜索策略从队列中疡下一步要抓取的网页资源，并重复上述过程，直到达到系统的某一条件时停止，另外，所有被抓取的网页西药存贮，再进行一定的分析、过滤，并建立索引，以便之后的查询和检索。”

克里斯兴奋了起来，道：“那就是抓龋块读染点的配置文件，可以按照执行的频率进行抓取，等到抓取到结果就返回pipe1ine接中，这就是完成了抽取！”

罗曼也道：“然后把新现的连接在1inkbase里面进行dedup，并push到1inkbase的新url模块里面，最后让调度模块选取ur1进抓龋块的待抓扔列，之后就能反馈了啊！”

张伟和郑文不懂这些，听得雨里雾里，可是接下来这些专业士说的话让他们至少明白一点，这个推测可行！

泰勒结结道：“这这就是抓取流程了？”

克里斯非常坚定道：“我觉得有百分之八十的成功率i以试试看！”

听到最专业的克里斯这么说，十几个都非唱奇地看了一眼张伟，他们怎么也想不明白，一个网络上的外行，却能大致推算出流程？难道这就是天生的妖孽？怪不得家十几岁就能执掌庞大的资产！怪不得华金资本被经营的有模有样！上天果然是有区别的，有些一出生就他妈和别不一样啊！(未完待续。)

[记住网址 龙腾小说 Ltxsfb.com]