“可我们要是把网络堆到一亿参数呢?一亿个参数,一千四百万张图,平均下来,每个参数分到零点一四张图的信息量。”
“这就好比你要养一亿头猪,结果饲料只够喂一千四百万头,剩下那些猪饿疯了,见什么啃什么。”
戴教授被这个比喻噎了一下。
你要不要这么接地气?
我又不是你学生,我能懂好吗!
“那再拿些图片去标呗?”
“谁去标?钱谁出?三年之后黄花菜都凉了。”
“增加数据,此路不通。”
“那就减参数,把网络砍浅一点?”
“砍浅了,表达能力又不够了,那还搞什么深度学习,直接回去用支持向量机得了。”
“师兄,您看明白了吧?加数据不行,减参数也不行,我们现在就卡在这儿,进退两难,上下不能。”
戴教授慢慢消化着这些信息,忽然想起一件事:“哎,qinet不就是燕大那个漆昊搞出来的吗?他既然能把八层网络训出来,说不定这事他能想到办法,你们没想过去请教请教?”
这话一出,朱教授的表情更精彩了。
“想过,怎么没想过。“
“实不相瞒,张院士前阵子就动过这个念头,想亲自带队去燕大,跟那位漆神当面聊聊。”
“然后方案报上去,卡住了。”
朱教授苦笑:“师兄,您又不是不知道,咱们清大某位院士和燕大那点梁子,隔着一条马路能吵出一条马里亚纳海沟,张院士要是带队过去登门求教,回头传出去,清大院士率队赴燕大取经,这标题往新闻上一挂,咱们学校的脸往哪儿搁?”
“咳咳,那位院士和他老师陈省身先生关系也走过下坡路。”
“他和谁的关系走过上坡路?”
“田院士吧,毕竟也没办法再坏了。”
两人说完,苦笑了起来。
“所以上头的意思是,先自行研究,实在不行,再通过基金委组个联合项目,把人绕进来,面子上好看点。”
戴教授听得直摇头。
都什么时候了,还搁这儿讲究面子。
可他转念一想,自己不也是因为拉不下脸去找大飞,才来找师弟的吗?
五十步笑百步,谁也别说谁。
“老朱,你们好歹是有方向的,知道问题出在过拟合上,知道该往哪个方向想办法,实在不行,隔壁还有个发明qinet的活菩萨,脸皮一豁出去,总归有人可以请教。”
“我呢?”
“我那个方向想追赶,连追赶的方向都找不着,想请教,连该请教谁都不知道。”
朱教授默然,随后说道:“师兄,要不您也转深度学习吧,反正这坑我已经踩了几个月了,踩过的坑给您画个图,您沿着边儿走。”
“免了,你们那深渊巨坑,还是你自己待着吧。”
……
燕京大学,理科一号楼。
李教授办公室里,漆昊正跟李教授讨论一个矩阵分解的优化问题,传来了一阵敲门声。