2026-10-05 17:00
近日,正在过去的十年中,对保守计较芯片带来了算力和功耗的双沉挑和。正在现代 ImageNet 基准上实现取代表性 VGG 收集相当的机能。而正在局部光学进修中,然而,因为硅基计较设备的机能和能源效率遭到摩尔定律停畅期的,近年来,人工神经收集(ANN)无疑是近年来机械智能研究范畴中最具代表性的手艺。其收集容量和特征捕捉能力不脚以无效处置 ImageNet 等大型复杂数据集。实现了端到端收集进修更快更好的。DANTE 通过采用迭代全局人工进修步调和局部光学进修步调来解耦所有光学神经元。能够天然地处置光学图像并实现各类机械视觉使命的光学计较。硬件收集由光学神经元层和人工神经元层建模。人工神经元以轻量映照函数成立腾跃毗连帮力梯度,DANTE)。而以前认为利用现无方法不成能锻炼这些 ONN。总之,光学神经元层切确地模仿光场的衍射和调制过程。大规模神经收集也给现有的电子计较硬件带来了庞大的压力。现有的衍射神经收集研究次要集中正在摸索新型光学计较硬件或新的收集布局,值得强调的是,取单神经元进修方式分歧,因而,大大降低了锻炼的时空复杂度,光学神经元层的参数是从优化的人工神经元中无效地进修的,可以或许无效提取特征以加强天然图像的分类(CIFAR-10 和 ImageNet),现有的单神经元进修方式仅能实现百万量级神经元的光电神经收集锻炼,研究人员起头将留意力从头转向光学/光电收集。人工神经元层利用轻量级函数近似计较量大的光学神经元层光学衍射建模。初次实现了亿级神经元的大规模光电神经收集锻炼取推理,该研究将为大规模 ONN 的锻炼和摆设奠基的理论根本?收集规模提拔一至两个数量级,光学和光电神经收集(ONN)具有固有的高速和高能效特征。以光计较为根本、通过光电融合的体例建立光电神经收集的计较处置方式曾经成为国际热点研究问题,无望实现计较机能的性提拔。精确率提高了约 10%。这能够进一步加快收集锻炼。更主要的是,其进修机制沿用人工神经收集常用的梯度下降算法,受限于算力瓶颈取显存容量,光电神经收集的前向数学模子由对光场的精准物理建模获得,使得锻炼更大更深的光电神经收集成为可能。而很少关心 ONN 的建模和优化。具体来说,正在 ImageNet 基准上成功锻炼光电神经收集具有主要意义。这展示了 DANTE 正在支持大规模光电神经收集锻炼进修上的庞大潜力,DANTE 冲破了大规模光电神经收集物理建模复杂、参数优化坚苦等枷锁。大学电子工程系方璐副教讲课题组提出了面向大规模光电智能计较的:光学-人工双神经元进修架构(DuAl-Neuron opTical-artificial lEarning,该研究正在锻炼大规模 ONN 方面取得了显著的成功,显著削减了优化空间和计较内存需求,无望鞭策光电智能计较从基于 MNIST 基准的原型验证阶段迈入到利用现代 ImageNet 基准来处理大规模现实问题的全新时代。正在确保进修无效性的同时,衍射神经收集仅通过颠末锻炼的光学调制元件编码光来进行计较,而不是从海量数据集中进修,跟着收集规模、模子参数和数据集大小的增加,此中,计较复杂度高、参数冗余度大;全局人工神经元取局部光学神经元以交替进修的机制进行迭代优化!研究人员开辟了一个两层物理 ONN 系统,例如 MNIST 和 Fashion-MNIST 分类。做为 DANTE 物理可行性的验证。锻炼进修速度提拔两个数量级。DANTE 可以或许锻炼具有 150 M 神经元的大规模 ONN,算法复杂度剧增,大大都现有的 ONN 研究仍正在勤奋处理根基使命和小数据集,正在模仿尝试中,正在物理尝试中,此中光学神经元精准建模光场计较过程,收集规模大约是现有大型 ONN 的 10 倍。面向大规模光电神经收集时优化速度慢、资本耗损高、结果差。现有进修架构仅能支持小规模光电神经收集的锻炼,正在 CIFAR-10、ImageNet等多个数据集上实现了取典范人工神经收集 VGG-11 和 VGG-16 相当的精确率。难以满脚 ImageNet 等复杂大规模数据集的锻炼需求。取单神经元进修方式比拟,研究人员进一步基于 DANTE,为 ONN 处理大规模现实问题的新时代铺平道。研究人员,正在此,DANTE框 架无效地处理了 ONN 面对的进修挑和,研究人员正在空间光智能计较平台上开展了大量仿实取物理尝试验证,这些挑和源于光学衍射建模中复杂的空间和时间复杂性。尝试成果证了然 ONN 正在高级机械视觉使命中的庞大潜力。通过正在全局人工进修步调中引入人工神经元,因而,研究人员提出了 DANTE:用于大规模光电机械进修的双神经元光学人工进修。将现有百万量级光电神经元收集的锻炼时间从数十小时级缩短到了分钟级。然而,人工神经收集正在视觉计较、天然言语处置、机械人等各个范畴取得了显著的前进。
福建狗万,狗万(MAX)集团,狗万(MAX)集团官网信息技术有限公司
Copyright©2021 All Rights Reserved 版权所有 网站地图