一秒记住【笔趣阁】biquge34567.com,更新快,无弹窗!
第1205章两亿预算?!啥也别说了,忠橙!(第1/2页)
“当网络层数叠加到一定深度,会出现不可逆的梯度衰减、特征退化,浅层的有效特征,会在层层传递中不断丢失、失真、稀释,网络越深,学习能力反而越弱,准确率不升反降。”
“基于这个问题,我才将接下来的课题定为深度网络在物理层面的衰减问题,希望能验证我的想法,尝试看看能不能用另一种方式解决这个问题。”
陈星心中狂喜,就是这个!
就是这个点!
何凯明思考的问题,正是他以后名动天下的ReSNet残差网络诞生的前置思考。
就像他说的一样,学术界普遍认为神经网络越深、层数越多,AI越强,可现实却是网络叠深之后,出现梯度消失、梯度爆炸、性能退化越深、准确率反而越低,学不动。
属于是越学越废。
解决方式也正是何凯明提出来的,直接短路连接、残差跳跃,不用让每一层网络都必须学完整新特征。
说人话就是允许神经网络偷懒、进行残缺学习,不需要每层都强行拟合,学不动的部分直接跳过、残差传递。
当然,陈星也是一知半解,他也不会直接告诉何凯明所谓的残差网络,只是引导着问他:“那现在你有解决思路吗?”
“有一点,但不多,因为我是刚从计算机视觉转到神经网络不久,还没有完整的构建自己的体系,只是一些粗略想法。”
“比如我在想,既然层层传递会不断损耗特征、梯度会逐层消失,那我们未必一定要让每一层网络都强制学习全新的特征。”
“如果我们搭建一条旁路直连通道,让原始特征可以跳过部分堆叠层,直接向后传递,让深层网络只需要学习前后的残差差异,是不是就能规避深度衰减的问题?”
“不用层层拟合完整特征,只学增量偏差,剩余原始信息直接直通保留。”
陈星心中再次确定。
来了!
没错,就是这个!
这就是未来统治整个AI视觉、深度学习、自动驾驶领域的残差神经网络ReSNet!
别人还在头疼网络越深越废的行业难题,何凯明已经摸到了下一代AI底层架构的钥匙。
陈星不动声色,按捺住心中的激动,脸上露出欣赏的笑意对何凯明说:“这个思路非常大胆,也极具颠覆性,你尽管放手去做,这个项目我批了,实验室所有算力、数据、资源你可以整理一下交到我这边来。”
“我亲自给你审批。”
顿了顿,陈星接着说:“资金的话,你的团队还没完全搭建完成,前期资金先给你两个亿吧,放在你们专项账户,随时支取,不够了你随时给我申请。”
“多少!”听到这个数字,何凯明腾的一下站了起来,“两个亿?还是前期资金?”
龟龟,自己在微软实习时候的项目组,一年的经费不过百万美元级别,换算成人民币也就一千多万。
陈总张嘴就是两个亿?
还是前期资金?!
难道这就是所谓的多财多亿?凭亿近人?
“哎,何博士,你激动什么,坐下,坐下。”陈星不在乎的摆了摆手,示意何凯明坐下。
才两个亿就激动成这个样子?
那以前过的什么苦日子啊。
(本章未完,请点击下一页继续阅读)第1205章两亿预算?!啥也别说了,忠橙!(第2/2页)
“陈总,不是,这也太多了,两个亿我怎么花得完啊。”何凯明重新坐下以后,有点手足无措,第一次自己主持项目和课题,打死他也没想到上手就是两个亿啊。
怎么花都是一个问题。
“哎,我给成教授配备了一个400多张卡的GPU算力集群,40多台服务器,你也得差不多的配置吧?”
“还有数据集,数据资源,学术资源,这不都得花钱。”
“所以两个亿真不多。”
何凯明一想也是哦,在学校和在微软的时候,设备都是公司准备好的,不需要自己搞,现在来红星负责项目,那这些硬件成本也是属于项目组内的。
都需要花项目资金的,光硬件成本一项,就得占用一半资金。
“哦,对了,还有算法研究员,算法工程师,运维等等人力部分,这方面你有什么要求?”陈星接着问道。
甘良才听到陈星这句话,轻轻抬起腿,趁着陈星注意力都在何凯明身上,赶紧往门口挪。
完蛋,完蛋,陈总刚答应自己的休假啊。
估计又要泡汤了。
“哎,老甘,你干甚去?”
“别跑啊!”
等陈星说完那句正好趁甘总在这的时候,抬头发现甘良才已经挪到了门口,大有一言不合就跑的架势。
看陈星和甘良才的样子,何凯明也笑了起来,红星内部实在是太有意思了,前面有红星品牌总裁扬拓当着陈总的面抢自己。
后有人力资源总裁想偷偷溜走。
红星的氛围实在是太棒了!
“陈总,这点不用过于麻烦甘总,目前只需要搭建一个小团队,后期再补充就行。”
听到何凯明的话,甘良才这才停下脚步,重新回到陈星面前,“陈总,没什么没什么,刚才尿急……”
接着转向何凯明,问道:“何博士,你说需要哪方面的,我来给你配置。”
“核心算法研究员,这个不需要甘总操心,我有自己成熟的团队。”
“那他们能过来吗?”甘良才有点不放心的问道,关于人工智能方面的核心算法研究员,在国内可是稀罕物件,甚至可以说是——
他能自己搞定那自然是极好的,如果人家不愿意来,自己怕不是又要满球飞了。
何凯明笑了一下,看向陈星说:“1坤分之前,他们可能还会犹豫,不过有陈总两亿前期项目资金打底,我想他们会很乐意和我一起的。”
“数据工程师初期需要2~3人,运维、系统工程师什么的就拜托甘总了。”
甘良才把胸脯拍的震天响,“放心,你把具体需求告诉我,我月底之前就能给你搞定!”
核心算法研究员不好找,数据工程师,系统,运维什么的随便招,优中选优对红星来说也是随便招。
“陈总,甘总,那今天就先到这里,我想先去找成文飞成教授,沟通一下,毕竟我的课题也需要依托他的基础。”
“走走走,我带你过去。”甘良才忙不迭的让何凯明和他一起,生怕陈星把他留下来安排其他工作。
假期可是好不容易才争取来的。
这回是天塌了,也得等我AAA红星甘总(全球可飞)休完假期再说。