“什么意思?”
“别忘了,咱们有微点!微点搜索的网页库存,都有200亿了,几乎所有的页,都录入了。你搞一套算法,对比查重就行了。把今日头条的文章,跟这200亿网页中的文章对比一下,重复率超过40%、50%的的就可以断定为非原创。”
“我靠!”
郭鹏飞惊了个呆。
感觉周老大有点飘了。
这得是多大规模的计算量?
且不说这个复杂又智能的查重系统能不能做出来,就算做出来了,这么大的计算力,就现在紫微星的那点服务器,根本不够用。
得去专门建一个数据中心!
周不器道:“把这200亿个网页,分类一下。然后让相关方向的文章去分类网页中对比查重就可以了,说不定只有10亿的规模。”
“那也很大!做不起来!”
内容未完,下一页继续阅读