主题:
字号:
16
行距:
2.0

第1765章 遇到问题,分析问题,解决问题[2 / 3]

一个记录每个网页的出链,一个记录入链。

然后迭代计算,直到收敛。”

“收敛条件呢?”

“每个网页的分数变化小于某个阈值。”

“计算量还是大。”张涛摇头,“十万网页,矩阵就是一百亿个元素。

现在的服务器算不动。”

第三天,陈浩打电话来了。

“遇到困难了?”他问。

贾瀞雯实话实说:“算力不够。

团队说矩阵太大,迭代计算需要的时间太长。”

电话那头沉默了一会儿。

“可以简化。”陈浩说,“第一,不需要算所有网页。

只计算有入链的网页,那些孤立页面直接给最低分。

第二,迭代可以分批进行,不需要一次性算完。

第三,分数不需要精确到小数点后很多位,整数就行。”

贾瀞雯把这些记下来,转告给团队。

李明听了,一拍大腿:“对啊!我们可以分块计算!先把网页按链接关系分组,组内迭代,组间再迭代。

这样内存占用能降下来。”

思路打开了,进展就快了。

第一周结束时,他们做出了简化版的超链分析算法。

测试数据很小,只有一千个网页,但结果令人鼓舞——重要网页的分数确实高,垃圾网页的分数确实低。

第二周,开始集成到真实数据里。

问题又来了:十万网页的链接关系太复杂,计算一次要八个小时。

“太慢了。”张涛盯着屏幕,“如果每天都要重新计算,根本跟不上网页更新的速度。”

贾瀞雯给陈浩打电话。

这次陈浩的建议很直接:“增量更新。

每天只计算新增网页和发生变化的部分,其他的用缓存。”

又是新的挑战。

但团队已经适应了这种节奏——遇到问题,分析问题,解决问题。

第二周周四晚上,李明从座位上跳起来。

“出来了!第一次完整计算完成!”

所有人围过去。

屏幕上显示着计算结果:十万网页,每个都有一个分数。

排在前面的,确实是那些权威网站,新闻门户,高校主页。

排在后面的,大多是个人主页或者广告页面。

“集成到排名算法里测试一下。”贾瀞雯说。

李明敲了几行代码,启动测试程序。

输入几个关键词,搜索结果按新算法排序。

效果明显。

之前搜“电脑价格”,前排结果里总有几个堆关键词的垃圾页面。

现在那些页面不见了,取而代之的是真正的电脑报价网站。

“准确率!”张涛喊,“测试集准确率升到百分之六

本章未完,请点击下一页继续阅读!

我在大唐当闲王李慎李世民
悟途reborn
我和重生真千金掀翻全场
泠月醉
江玄江雪
逐风
末日:别人饿肚子,而我捡妹子
梦蟲
重生再嫁皇胄,我只想乱帝心夺凤位江凤华谢觞苏婷婉
月下小兔
星穹模拟:开局成为镜流竹马
这紫啧紫啧紫啧
水浒:俺专门收集怨妇
飞不动的猫
兵王:七个战友竟都是千金小姐!
揩油笔
最强末世进化
蔡四爷
开局卖掉铁饭碗,带全家投奔竹马军官
慕荣华
重生天龙,大宋小王爷,天下无敌
残月断星
爱在繁花盛开的季节
贝壳薇
将通房丫鬟送人后,世子悔疯了
青简
提离婚你装高冷,我发财了你发疯?
云中觅
陆昭菱周时阅
安卿心
停电亲错人,妹宝惹上冷傲机长
橙子的猫猫
老来娶妻的我,打造出最强仙族
暗夜萤火
工业克苏鲁不相信魔法
绫虚神
直播:我耿直中医,患者全网社死
特种兵火凤凰
分手后,我让垃圾竹马跪地喊婶婶盛晏庭苏锦
纳兰雪宝
超级女婿赵旭
韦小鸨
我医武双绝,美女总裁倒贴我
滚滚红尘
万域第一剑
蒲松
综影视:满级后我回来了!
余映乔
重回70:赶山打猎,我一人养三家!
张德子
我才五岁,怎么就成军区团宠了
团子大王
缠娇
渣海爱吃肉
嫁到乡下的骑士小姐今天恶堕了吗
百草神农自知毒
重回千禧年打造商业帝国
舒赢
综影视漫游录
呼噜呼噜一个大月亮
阿拉尔宇宙之潮汐
TheInfinite
斩神:如何正确白嫖一个上京户口
风昀而覆
穿越荒年,闺蜜成了我的金手指
土土生金
贞观小闲王
悟途
神陨之后:我在综影视世界当路人
恶霸蟑螂大王酱
神级钓场,钓鱼佬排着队给我送钱
暗猜
舔狗四年不珍惜,转头嫁你哥你哭啥?
高枕
遭了,曲爹马甲被直播曝光!
野渡长风
锦绣鸿途
千鸿
红颜劫,从神医开始崛起
难得一时悲欢
儿子走丢后,她发疯杀穿全府
柒行运
天才降临,傅总,该你养娃了
宴礼
冷婚五年偷生崽,心死离婚他却悔了
云棠
城隍是我老祖,原来我是神N代
王六福
吴劫李通玄
紫梦游龙
系统送编,我从外卖员变国安特勤
骑着青牛漫步
我的男神老板
潘家三少
替嫁婚宠:顾少宠妻花样多
瑞士卷
形婚两年不同房,改嫁大佬被宠坏
小满年
贼道
玉者王也