(1)面向检测场景的工业 AI大模型

①研发方向描述:

本研究旨在研发多模态和单模态的工业视觉大模型,用于解决图像分类、目标检测和语义分割等主流任务。

②关键研究问题:

探究并确定工业场景下单模态和多模态视觉大模型的选择方向?

如何分别设计图像分类、目标检测，语义分割任务的视觉大模型?如何将视觉大模型进行压缩轻量化加速，以适配满足工业生产节拍?如何提高视觉大模型的泛化性，便于降低场景变化时的样本需求量?③研究方法:

利用现有的开源 CLIP、DINO、SAM 等算法大模型提供的算法思想，独立设计并完善具备Transfommer 编解码结构或 mamba 组件技术的具备分类、检测和分割能力的工业 AI大模型。

(2)工业检测场景小样本或零样本小模型算法①研发方向描述:

本研究旨在研发当前用于解决图像分类、目标检测和语义分割等主流仟务的小样本或零样本

AI算法模型。

②)关键研究问题:

如何分别设计针对图像分类、目标检测，语义分割任务的小样本方法?如何分别设计针对图像分类、目标检测，语义分割任务的零样本方法?3研究方法:

基于 one-shot和zero-shot 等技术，独立设计并完善分类、检测和分割能力的 AI 小模型算法

(3)基于AI大模型的工业图像数据生成

①研究方向描述:

本研究旨在研发缺陷和非缺陷工业图像数据的生成的 AI算法模型，用以解决工业缺陷检测缺少图像数据的痛点问题。研究将集中在工业图像仿真生成,提升工业图像生成的逼真度和速度以得到高泛化性的工业缺陷生成 AI大模型。

2)关键研究问题:

如何设计生成式 AI网络模型，以兼顾缺陷和非缺陷的图像数据的生成?如何轻量化缺陷生成AI模型，在保证生成质量的同时兼顾图像的生成效率?如何提高缺陷和非缺陷图片的生成的高逼真度?③研究方法:

基于现有扩散模型或 stable difusion 等方法，改进开源的大模型神经网络或自主设计大模型神经网络架构，完成工业图像数据生成。

(1)已开展的工作:

已经建立了博士后创新基地，以及配套的博士生培养的管理机制和制度体系:已组建了一支高水平的工业视觉算法团队,具备丰富的工业缺陷检测算法开发和落地经验;(2)所处阶段:

当前在工业领域的主流 CV 算法、主流网络模型均已形成自研核心成果，并完成成果的工程化应用。目前需要在前沿领域的跟踪、研究上投入科研级的资源。(3)投入资金及人力:

科研经费方面，根据项目需要给与专项项目经费支持。公司聘请厦门大学等双一流高校的教授作为技术指导，公司每个月安排博士后与高校、企业导师交流互动，了解博士后科研过程中的疑难点，共同沟通讨论解决方案，攻克技术难题。(4)仪器设备:

具备全面且先进的光学实验室和算力中心，可以满足博士生的实验研究需求;公司目前拥有的仪器设备包括 3D检测平台、Photon 标准测量平台、组装训练机等;科研后勤条件:采购文献检索数据库检索工作，采购一批用于科研的图书，设置内部图书馆。(5)生产条件:

博士后为公司重点人才及培养对象，公司为博士后中请骨干人才、高层次人才保障房。薪资福利方面，包括工资、津贴、医疗保险、健康保险、交通补贴、子女教育资金等，为博士后申请生活补贴;

(1)“面向检测场景的工业 AI大模型”预期成果:研发出分别可执行分类，目标检测和语义分割任务的工业 AI大模型,或研发出一种可同时执行多任务的工业 A1 大模型，并具备高泛化性，推理速度可满足产线节拍要求。

(2)“工业检测场景小样本或零样本小模型算法”预期成果:研发出分别可执行分类，目标检测和语义分割任务的小样本或零样本小模型，并具备较低的真实产线数据的漏杀和过杀概率

(3)“基于 AI大模型的工业图像数据生成”预期成果:研发出一种可生成高质量工业图像数据，且训练耗时短，资源消耗低的AI工业大模型，可广泛适用于多种场景下的缺陷和非缺陷图像数据生成。

(1)博士后研究工作期间要求:

应完整履行与设站单位签订的劳动(聘用)合同(或工作协议)约定的期限。(2)发表学术论文:

工作期间，博士后人员应以第一作者身份(或共同第一作者中排名第一)，或作为唯一通讯作者，在国际公认的 SCI、EI、SSCI 源刊物上发表至少一篇学术论文。论文发表需明确标注【微亚智能博士后创新实践基地】为第一单位，确保研究成果的归属明确。(3)申报发明专利:

工作期间，博士后人员应以排名前三发明人,在国际或国内提交至少一件与研究课题相关的发明专利，且专利需要通过国家知识产权局的审核进入实审阶段或授权阶段。发明专利权益人须为【厦门微亚智能科技股份有限公司】，确保研究成果的归属明确。(4)申报科研奖励:

工作期间，博士后人员应参与并成功申报至少一项市级及以上科技奖励，以体现科研成果的创新性和实用性。申报单位须为【厦门微亚智能科技股份有限公司】，确保研究成果的归属明确⑤撰写课题结项与研究报告:

博士后人员应撰写在站研究课题的结项报告，全面反映课题研究过程、方法、结果及结论应提交详细的研究工作报告，包括但不限于技术原理文档、技术原理讲解 PPT、输入数据压缩包、以及经检验的可正常运行出正确效果的代码。