一群研究生和两位工程师,立刻屁颠屁颠地跟在齐教授和漆昊身后,涌向了漆昊的工位。
当齐教授走到那台崭新的工作站前,看到旁边那个硕大的1200电源时,他脚步一顿,看向了陈工。
陈工假装在看天花板上的灯,一句话都不敢多说。
漆昊没有在意这些,他坐下来,滑了滑滑鼠,唤醒了暗下去的屏幕。
此时,屏幕上正显示着一个用C写的简易控制台界面,上面还残留着最终训练日志。
「齐教授,这是我实验室里现成的数据集进行的测试,一共10000张。」
「我看了下相关日志,在之前使用的伺服器CP上,运行一个Epoc的训练耗时,平均在一个小时左右。」
齐教授微微颔首:「没错,一个小时,这已经是优化后的极限了,想要训练到一个勉强可用的精度,至少需要叠代10个Epoc,那就是将近十三个小时。」
「是的。」漆昊微微一笑,「所以我昨晚尝试了新的方法,这是昨晚我运行10个Epoc的实时训练输出日志,您可以看一下。」
漆昊轻敲回车,拉动滚动条,将昨晚的训练控制台日志呈现在所有人面前。
【rinin Epoc10/10】
【olrininime:1小时28分27秒】
「这时间坏了吧?」陈工脱口而出。
齐教授顾不上教授的体面,半蹲着身子,开始快速翻看编译日志和CD运行态监控。
屏幕上的实时数据显示得清清楚楚:P利用率在训练期间长期维持在93.2%的数值。
双卡显存占用稳定,没有发生任何一次显存溢出。
PCle总线带宽利用率极低,说明绝大部分计算都在显存内部的高速cce中完成的。
而最终模型在测试集上跑出来的89.4%的识别率,更是铁一般的事实,做不了任何假「你用的什么显卡?」
」X580。
「6
游戏显卡?
在传统的CP伺服器上,需要不吃不喝,辛辛苦苦跑上整整13个小时才能完成的训练闭环。
在这个少年的编程下,两块被所有人视为不务正业的游戏卡,居然把训练时长压缩到了一小时二十八分钟!
「我们现在可以重新测试一个数据集吗?」
「当然可以,反正也花不了多长时间。」漆昊自信地说。
齐教授重新选了一个数据集。
「我们就跑这个!这是大飞上个月刚发来的航拍数据集,整整18000张包含复杂室内光影和高噪点遮挡的图像。」
「由于多通道特征极度交错,以前在至强伺服器上跑,光是前向传播的特征对齐就能生生磨蹭掉一个半小时,整套叠代下来更是需要耗费将近大半天的时间,我们平时根本不敢轻易用它来做模型验证。」
「小漆,这个数据集的规模和复杂度,可比你刚才跑的那套普通数据要高得多,你敢用它现跑吗?」
「当然可以,无非就是多花个几分钟罢了。」
漆昊坦然说道,然后他修改了配置文件里的数据集加载路径,随后熟练地在终端输入了编译和运行指令。