深度学习驱动的超构表面设计进展及其在全息成像中的应用

当前深度学习技术与超构表面metasurface全息成像技术的融合有力推动了光学成像领域的发展。得益于超构表面对光波特性的精准调控全息成像技术经处理后可生成对应的三维图像。因此二者的结合可实现高质量图像的获取。基于神经网络深度学习方法进行超构表面设计的文章数量日益增多但关于该主题的综述仍较为匮乏。据麦姆斯咨询报道近期中国计量大学田颖教授等人在Photonics期刊上发表了题为“Advances in Deep Learning-Driven Metasurface Design and Application in Holographic Imaging”的综述文章。文中介绍了神经网络的发展历程以及利用四种神经网络进行超构表面设计的相关内容并探讨了基于深度学习设计的超构表面全息成像技术的应用从而增进读者对此类技术的系统性理解。基于深度学习的超构表面设计近年来深度学习作为一门快速发展的交叉学科技术其在超构表面设计中的应用引起了学术界的广泛关注。本文总结了四种用于超构表面设计的神经网络框架如下图所示。凭借神经网络的优异学习能力深度学习能够识别超构表面结构属性与其电磁特性之间复杂的隐性关系并利用大规模数据集简化设计过程。四种用于超构表面设计的经典神经网络模型卷积神经网络CNN是众多深度学习模型之一其输入层能够有效处理输入数据并将其传递至后续层。原始数据的空间维度对网络性能有着至关重要的影响如果原始数据的尺度不符合网络的要求通常会进行归一化、尺度调整或区域裁剪等操作以使数据与网络规范相匹配。对于超构表面设计而言卷积神经网络的卷积机制可直接对超构表面单元的空间分布进行建模使网络无需依赖先验经验模型即可学习电磁响应特征。卷积神经网络所固有的局部连接性和权重共享特性与超构表面的设计原理高度契合。此外多通道处理能够实现多物理场协同优化从而提升光学性能、结构稳定性与工艺适配性。用于超构表面设计的部分卷积神经网络框架如图下所示。超构表面设计中的卷积神经网络模型生成网络旨在全面理解原始训练数据集的内在概率分布特征并生成符合该分布的新的数据样本。最具代表性的生成模型为生成对抗网络GAN其通过生成器G和判别器D之间的对抗训练过程进行优化。在超构表面设计中生成对抗网络通过以端到端的方式将潜在变量的几何结构直接映射到相应的光学响应解决了电磁仿真软件中的瓶颈问题。除了提高速度之外生成对抗网络还能够探索高维参数空间有助于发现满足光学功能要求的超构表面结构。通过将目标函数例如相位分布或透射光谱作为条件输入生成对抗网络避免了传统优化方法的常见缺陷并引入电磁性能约束从而在单次训练周期内实现全局优化。近期研究中使用生成对抗网络模型进行超构表面设计的框架图如下所示。超构表面设计中的生成对抗网络模型时序网络旨在洞察输入数据的时间相关性以便推断数据的后续演变过程。在训练过程中时序网络采用递归方式开展序列学习。在每个时间步网络会根据输入数据自行调整将数据的历史信息传递到后续训练中。这构成了一个用于处理时间依赖关系的动态建模框架其中循环神经网络RNN是最具代表性的早期范例。然而基本循环神经网络模型无法解决梯度消失问题这极大地限制了模型的学习能力。正是为了解决梯度约束问题引入了独特的门控机制从而产生了长短期记忆LSTM模型。这些门控机制使LSTM能够有效地管理长期依赖关系克服了传统RNN的学习局限性。部分相关文献中所采用的循环神经网络模型框架如下图所示。超构表面设计中的循环神经网络模型基于深度学习设计的超构表面的全息应用超构表面全息成像利用人工亚波长结构对电磁波场的精确调控能力通过设计超构表面阵列的空间排布与几何布局基于数字化的目标光场分布来调制光波的各项参数从而实现全息成像。超构表面全息技术融合了两类技术的优势该技术将目标光场分布逆向设计为各单元的相位调制函数把连续相位轮廓转化为数字编码图案并通过单元结构排布构成全息图的编码区域。这种“数字设计-纳米结构编码-波前重构”的机理摒弃了传统全息术中依赖实物客体与复杂干涉系统通过定制化超构表面单元排布可对成像位置、景深、多通道显示实现精密调控使其适用于动态全息显示、光学信息加密等应用场景。近期研究中利用神经网络设计超构表面应用于全息成像的模型框架如下图所示。超构表面全息成像应用的深度学习模型综上所述研究人员全面探讨了四种经典的深度学习模型——卷积神经网络、生成对抗网络、循环神经网络和长短期记忆网络并阐述了它们在超构表面设计和全息成像中的应用。深度学习的融入使超构表面设计变得更加多样化、高效且精确简化了此前复杂的逆向设计过程。深度学习与超构表面设计工程的交叉融合代表了一种新颖且极具前景的研究方向旨在提高传统超构表面设计的精度和速度。文中总结了基于深度学习设计的超构表面在全息成像中的应用。未来的工作应将这项技术扩展到其他相关领域。端到端的设计消除了传统分步工作流程中的误差累积。在端到端的全系统设计中构建了一个融合“目标需求-超构表面结构-阵列布局”的联合优化模型其中扩散模型生成初始结构随后通过强化学习进行参数优化。新兴神经网络架构——图神经网络GNN和扩散模型——为超构表面设计提供了新的范式。此外基于GNN对单元间电磁耦合的建模结合物理约束损失函数能够实现多波段工作超构表面的设计。这些方面共同凸显了未来研究方向的多样性。论文链接https://doi.org/10.3390/photonics12100947本文转自MEMSEND欢迎加入Imagination GPU与人工智能交流2群入群请加小编微信eetrend89添加请备注公司名和职称推荐阅读Imagination D-Series GPU 实机演示支持DirectX 游戏边缘AI时代的流片风险GPU IP的优势所在Imagination Technologies 是一家总部位于英国的公司致力于研发芯片和软件知识产权IP基于Imagination IP的产品已在全球数十亿人的电话、汽车、家庭和工作场所中使用。获取更多物联网、智能穿戴、通信、汽车电子、图形图像开发等前沿技术信息欢迎关注 Imagination Tech