2013年的暑假,距离比赛开始时间还有大约一个月的时间。
“模型的训练过程需要将所有的权重,数据和许多中间过程都放入GPU中进行处理。
因而GPU的显存大小格外重要。”
孟繁岐叹了口气,“即便是我们购买的旗舰690,也太小了,只有4G大小。”
比起后来被美国禁止卖给华国的A100-80G,690不说其他性能,单显存就少了20倍。
孟繁岐如今只能可怜巴巴地每次使用16张图片对模型进行迭代。
“一次十六张,一次循环要接近一百万次才能更新完整个数据集。
而想把模型收敛好,上百次循环又是少不了的。”
孟繁岐估算了一下,这个版本出一次结果要接近20天,最后的训练过程确实大概消耗了三周左右以收敛到现在的这个性能。
好在IMAGENET在后来基本成为了每个算法工程师必调参的练手数据集,孟繁岐自己就曾无数次刷榜,自然是轻车熟路,清楚各类参数的大概设置。
这为他至少节省了一两個月的珍贵时间。
即便一次训练需要三周之久,孟繁岐却仍旧赶在比赛开始之前就已经准备好了一版模型。
看着训练出来的模型最终性能达到了预期,孟繁岐心中的一块大石总算落地了。
这几个月来,他唯一担心的一件事情就是多年前的老框架会出一些他意料之外的问题,导致最终的结果不能和理论预期吻合。
一旦这种事情发生,找到问题所在并测试解决的代价就太大了。
倘若不能够及时解决,会很大影响到他初期的规划。
眼下的结果大约在4.9%的top-5错误率,这个版本比后世论文中的性能要稍差了一丁点,但好在仍旧强于赛事方给出的人类标准了。
一般来说,比赛前是不会公布比赛所使用的具体数据的。
只是IMAGENET比赛比较特殊,一千多万量级的图片,总不可能办一两次比赛就舍弃掉,不再使用。
因而每届比赛所用的数据是变化很小的,只是具体赛道,所竞争的内容和评判的方式常会有所调整。
虽说IMAGENET休赛的时期其实也可以提交结果,孟繁岐现在就可以把这个结果上传上去,夺取第一的位置,但关注度毕竟不可与赛时的激烈竞争同日而语。
();() 与此同时,唐璜也终于开始意识到事情的走向已经远远偏离了他的预料。
“我记得之前查到AlNet在这上面的准确率不到85吧,你现在这个已经特么超过95了啊。”
唐璜第一次来查看结果的时候完全不敢相信这个事实。
“你确定没搞错?别忽悠兄弟啊。
兄弟书读的少,很容易被骗的。”
唐璜此刻的心态很复杂,很希望这是真的,但由于事情实在显得太美好,反而很难相信。
“是假的,我骗你的。”
孟繁岐翻了个白眼,“我加了特技,里面都是化学的成分。”
“不会吧,我亲眼看这性能一路上收敛上来的。”
唐璜又翻了翻模型训练的日志,声音之中带了三分委屈。
他刚刚已经在脑补自己抱紧大腿,走上人生巅峰的场景了。
这就是患得患失的可怜人啊,不敢相信,却又害怕是假的。
“虽然我没有测试集的真实答案,但是我从训练集里划了百分之5出来没有使用,作为验证的办法。”
孟繁岐对这个数据集的方差可以说是了然于胸,95%的数据用于训练,5%的数据用于测试已经是相当稳妥而保守的比例了。
“也就是说,只要这百分之5的数据和测试集的数据差别不大,你的办法可以比去年的冠军强十个百分点?”
唐璜仍旧还处于极度的震撼当中。
闷骚宠妻无底线的糙汉子x外表娇软内心凶残的俏知青aaa 1v1双洁甜宠空间重生打脸不隔夜aaa 逃亡之际,顾安安一跃跳下悬崖。aaa 不曾想再次睁开眼醒来时,她来到了华夏国的八...
穿越封神大劫之前上古神话世界,重生帝俊亿万载,一朝真灵苏醒已是接近巫妖大劫。就在帝俊为巫妖量劫而迷茫的时候,系统突然觉醒了。帝俊我都大罗了你告诉我系统才觉醒?还得完成各个任务才有奖励?察觉到彼此之间差距,帝俊直接开局就是炼化系统将系统祭天,由此获得运朝大道。推演运朝大道,为改变命运,帝俊建立神话运朝,打造至高天庭。妖族天庭?人者,天地人三道之一,凡是生灵或是信息结合存在,若有灵智皆以为人。以人道镇压天庭气运,以天庭统御诸天众生,建立人道天庭!当帝俊收服洪荒强者时以前世一些至高道路噱头忽悠洪荒大能,万万没想到忽悠的话竟然变成真的了。三清立三道,演化诸因之果存世之基终结之焉。女娲立人道,构建人道诸天,自身投影照映诸天,道统汇聚万界。伏羲汇聚琴演之道,以时空为琴声,以琴声追溯万古。冥河鲲鹏看着这一个个洪荒大能,帝俊陷入了沉思。我就说说而已你们还真行?...
陈玲玲穿进一本年代文。书里,她爸是男主,她妈是早死的原配。她妈因公牺牲,单位照顾他们父女,分了两室一厅的房子,还给她爸调了岗,让父女俩在物资匮乏的七十年代过得非常不错。然后,女主这个她爸的白月光...
穿越斗罗大陆成为宁荣荣的亲哥,还早生了四年!武魂七宝琉璃塔,没有系统,怎么办?宁小天表示,只能靠抱大腿来维持生活的样子!宁风致我是你亲爸,超有钱!尘心骨榕我们是超级斗罗!胡列娜我是武魂殿圣女!千仞雪我是未来的天使神!独孤雁我爷爷有仙草!比比东我是你丈母娘大人!宁小天武魂殿万岁!玉小刚到底是谁在整我?戴沐白我未婚妻都没了!还要被打?唐三小舞不见了?仙草呢?蓝银王呢?说好的机缘呢?PS不跟唐三,不拜大师,非无敌文,原创剧情较多,想看主角跟史莱克七怪的慎入。PS跟武魂殿合作,一统大陆!书友群854045954...
黑洞,宇宙中最神秘的天体。它引力巨大,可吞噬一切物质,视界范围内连光线都无法逃脱。根据广义相对论,物体质量越大,时间会更加缓慢,在大质量黑洞附近,时间过去一秒,其他时空可能过去一年。此外,跌入黑洞的...
方浩只想做一个安静的美男子。可是在这个看脸的时代,这显然是一个奢望。...