联想增强现实AR技术介绍

1、联想增强现实AR技术介绍 Lenovo研究院（上海）介绍 联想AR产品介绍 联想AR功能介绍 联想AR合作提案 联想AR案例展示CONTENTSLenovo Lenovo研究院（上海）介绍CONTENTSLenovo超过100人的产品研发团队， 10年智能手机研发经验 以及5年AR/VR研发经验。团队多次承担国家核高基重大专项， 863项目，上海市科委项目以及 上海市经信委项目等。（上海）积累AR及移动技术等领域 国内外发明专利超过300件。CONTENTSLenovo Lenovo研究院（上海）介绍 联想AR产品介绍daystAR云平台物体识别远程协助多人互动内容存储模型转换三维重建公有云/

2、私有云部署stARstudio电子手册工作流编辑stARemote音视频通话MR标记文档分享stARview全息展示多人互动stARcast第一视角投影无线传输stARKit SDK核心服务SDK多终端支持晨星AR 产品晨星AR一体机 晨星AR硬件设备产品在多领域创造价值，为客户提升效率，降低成本晨星AR分体机晨星AR摄像机晨星AR CV模组晨星AR设备：G1 一体机高通骁龙821安卓7.143视场角 语音交互 2 小时470克手势交互VPULenovo AR SDK720pSLAM晨星AR设备：G2 分体机200克 3瓦骁龙 845 + VPU43视场角Dual FHD(1080P) 6GB

3、 + 64GB (TF card up to 256G)2 Fisheye + 1 TOF + 1 RGBIMU, GPS，4G, etc.Type-C USB 3.0晨星AR设备：stARcam第三视角摄像机为您展示第三视角MR内容1080P 高清视频码流支持虚实交互 晨星AR设备：stARcore深度视觉传感器，使任意设备具备空间感知能力边缘计算设备，使设备响应更迅速支持SLAM3D扫描重建深度学习/识别引擎以太网口，Wifi，LTE and Type C多系统平台: Android/Linux/Windows主要功能核心能力6 DOF 定位追踪Mapping & 障碍感知检测(行为/手势

4、/缺陷检测)识别(货物/3D物体/图像) 在多领域创造价值，为客户提升效率，降低成本晨星AR系列工具晨星AR SDK晨星AR云平台行业客户开发者晨星AR软件服务晨星AR全景架构图Public Infrastructure(AWS/Aliyun/Lenovo)晨星产品官网 ()晨星开发者平台 (/developer) stARstudio stARemote stARview stARcaststARkit-Cloud/ (open Web API)AR设备管理.Auth 服务ResourceProvisioning高性能存储与计算平台公有云服务设施(Server/GPU, SSD, Publi

5、c Cloud)私有云服务设施晨星AR云平台IaaSAR工具核心服务API物体识别远程专家多用户互动模型转换3D重建公有云平台基础服务(阿里云)AR内容存储 stARkit-Device晨星AR云平台：开发者网站产品门户开发者门户WEB工具权限认证应用管理识别目标管理SDK/Sample/API需求收集产品试用联系反馈晨星工作流晨星远程协作晨星互动展示stARKit-Device支持晨星AR设备 G1 、G26DOF环境跟踪实时地图表面重建地图重定位实时平面检测平面视线碰撞检测SLAM运动预测超低渲染延时60FPS刷新率双目合像显示Engine手势识别头动交互交互手柄语音交互AR交互stARK

6、it-Cloud支持Unity，支持跨平台图片识别 /3D 物体识别本地识别和云端识别多目标跟踪支持CAD识别云端目标管理物体识别一对多音视频通讯虚实交叠的画笔标记文件发送(图片/PDF文档/截屏)云端视频记录 远程协助本地多人共享视图远程多人互动云端模型管理与互动编辑多人互动数模转换云端自动模型格式转换无缝接入平台解决方案支持3D模型文件格式：.obj/.fbx/.stp/.iges/stlCONTENTSLenovo Lenovo研究院（上海）介绍 什么是增强现实 联想AR功能介绍晨星工作流：stARstudio让做AR应用和做PPT一样容易Web编辑器基于网页的AR场景编辑器。用户可对虚

7、拟模型在场景中进行移动、旋转、缩放，并可添加文字、图片、音视频等AR信息，并把多个场景组织成一系列步骤Browser应用编辑器制作发布的内容可被装有Browser应用的AR眼镜获取，为佩戴者显示多步骤的AR指导说明stARscan对准物体扫一扫，云端自动生成真实物体的虚拟模型及特征文件晨星远程协作：stARemote让专家近在咫尺现场工程师现场的技术人员将第一视角视图传送给远程的专家，寻求协助和指导，支持MR视频录制；远程专家远程专家在屏幕上查看工程师的第一视角，圈点勾画，并将指示标记实时传送给工程师的眼镜端，支持冻屏，传送图片文档；运营人员用户管理系统云端视频通话记录查看晨星互动展示：stA

8、Rview多人直观沟通交流支持用户对三维内容进行分享展示，构建多人协同工作环境快速构建三维内容展示和多人协同工作三维内容的产生基于Web的三维内容编辑器，支持多种文件格式(OBJ/FBX/STL/STP/IGES)三维内容的展示佩戴AR眼镜的用户可实时查看三维内容，并与其它用户进行互动，协同工作通过stARcam摄像机实时捕捉AR画面，并以第三视角展示给观众CONTENTSLenovo Lenovo研究院（上海）介绍 什么是增强现实 AR技术在航空制造业领域趋势介绍 联想AR合作提案方案研讨设计展示不直观，沟通效率低动态调整困难，难以实时呈现效果信息化不足，方案不易落地业务挑战daystARG

9、1/G2stARcloudstARstudiostARview方案组合直观呈现与动态修改，提高方案研讨效率效果即时呈现，减少低效沟通多人远程共享方案，方便异地远程办公核心价值晨星AR方案研讨提案多维度展示设计方案，支持多人互动动态调整方案，可实时呈现最新效果方案动态修改与分享，能够用于工程实践气动布局仿真模拟风洞测试成本高，准备周期长设计方案调整困难，不方便连续测试与修改测试效果不易观察，无法回溯业务挑战daystARG1/G2stARview方案组合测试效果直观展示与效果回溯，提高效果评估质量支持连续测试与修改，较少时间成本核心价值晨星AR气动布局仿真测试提案全程记录测试过程测试与修改一体化

10、操作数字化模拟气流效果，多角度立体呈现生产装配现场作业情况难以完整记录，人员失误不易回溯管理人员现场巡视作业情况效率低，员工容易规避巡视线缆等装配过程操作复杂，对象繁多，查阅手册效率低装配人员培训成本高，周期长业务挑战daystARG1/G2stARStudioAidor算法库方案组合视频记录+巡视直播，有效进行装配过程监督，人为失误减少96%操作步骤现场提示，降低操作门槛，减少培训成本解放双手的装配位点和目标提示，装配效率提升3倍数字化辅助作业，一人能够胜任三个人的工作，减少人力成本200%核心价值晨星AR生产装配方案第一视角视频录像第一视角作业情况后台直播操作手册数字化与工作流提示装配对象

11、识别与安装位点提示质量检测检测过程依赖人员水平和素质，存在漏检、不规范、不准确的风险检测过程缺少记录，难以监管和回溯航电系统检测操作繁琐，屏幕信息比对麻烦肉眼识别外观瑕疵，效率低下，易出错业务挑战daystARG1/G2stARStudioAidor算法库方案组合标准操作流程指导+缺陷提示，人为失误减少95%全程视频记录监管与回溯，提升管理水平自动化的点按+核验提示，工作效率提升85%核心价值晨星AR质量检测方案第一视角视频录像面板点按提示屏幕核验提示外观缺陷图像检测与提示工作流程指导展览展示传统的布展方案难以对企业进行全方位展示展厅布置复杂，成本高但利用率低、展示效果一般业务挑战为用户定制开

12、发可持续的AR展览展示平台多维度展示企业内容，并与用户全方位交互展厅内外即时通讯、可直播，多人共享方案组合多角度形象地向潜在客户介绍产品特点，促进销售成功率提升公司形象、品牌形象核心价值晨星AR展览展示解决方案daystARG2stARview G-CAM交付维保高成本、效率低人员少、不规范设备多难识别，投入多减产量业务挑战daystAR G1/G2stARemotestARstudio方案组合远程维保指导可靠性高，大大降低故障率。有效提高排故服务效率。快速排除故障，提升客户服务体验。核心价值晨星AR远程维保解决方案第一视角的高清音视频通讯虚实融合的标注工具云端的实时视频录像图片/文档共享多终

13、端支持培训教学传统培训繁琐、枯燥，降低维护人员的学习兴趣培训条件有限，不能满足全员动手需求培训过程不系统，容易出现技术细节遗漏业务挑战培训过程分为指导、训练、考核三种模式制定完备培训过程，扫除技术盲区全员实操，分批考核，提升培训效率方案组合为企业降低培训成本为企业提高培训效率，提升学员整体水平核心价值daystARG2stARview G-CAM晨星AR培训教学方案云平台管理建设巡检效率低、问题发现处理不及时现场信息无法全面掌控设备仪器的生命周期数据系统不健全、业务挑战daystARG1/G2stARstudiostARemote方案组合系统管理一体化、设备服务标准化、业务数据共享化、安全防卫

14、智能化、核心价值晨星AR云平台管理建设设备数据实时显示缺陷异常检测预警远程协助解决问题CONTENTSLenovo Lenovo研究院（上海）介绍 什么是增强现实 AR技术在航空制造业领域趋势介绍 联想AR合作提案 联想AR案例展示案例展示（一）：航线检查解决方案1项目背景机务人才短缺、技术人才使用效率低可靠性差、现场检查工作无控无追溯项目成果检查要求自动提示；检查过程远程和智能协助；人机问答式排故；人员巡检路线快速显示；检查工作可管可控可追溯。项目方案构成234项目展示daystAR G2*硬件设备stARemote/stARstudio*软件工具 *私有云（基础架构）为用户搭建基于专网的私

15、有化服务*定制化为客户量身打造、深度定制专有的终端应用和云服务案例展示（二）民航MEL放行解决方案项目方案构成2项目展示34项目成果有效利用了专家资源；成功提高了效率；节约了成本；简化了MEL放行流程。项目背景MEL放行量波动大、业务专业性强、资质管理严格人员培训成本高、专家雇佣费用高、时间成本高管理手段不规范，高度依赖人员自觉专家资源无法合理利用、流程繁琐1daystAR G2*硬件设备stARemote/stARstudio*软件工具 *私有云（基础架构）为用户搭建基于专网的私有化服务*定制化为客户量身打造、深度定制专有的终端应用和云服务项目成果SKU300+ /架次定位精度 99%识别速

16、度 30ms误识别率 1%案例展示（三）：飞机EWIS装配解决方案（商飞）项目背景数量大：每架飞机共1800个EWIS需要组装工人多：三人同时作业完成一个EWIS装配低效率：每组每天只能装配2套EWIS第一视角的高清音视频虚实融合的EWIS端插指导云端的实时视频录像与M立方飞机现有系统深度融合大大提高了装配效率节约了人力投入成本项目方案构成硬件设备：daystAR G2软件工具：远程工具线缆端插APP私 有 云：搭建基于专网的私有化服务架构定 制 化：和用户现有系统对接，完成线缆编号、 飞机架次、工位等信息对应关系。为推进智慧教育教学方针，改善传统教学模式，中国美院率先发起体感交互与数据获取研

17、究平台建设需求。立志打造充满趣味性的教学以及展示课堂。项目背景daystAR G2、stARcam*硬件设备stARview/stARstudio*软件工具 *私有云（基础架构）为用户搭建基于专网的私有化服务。*定制化帮助美院量身打造、深度定制专有的终端应用和云服务快速创建三维内容支持多终端多平台展示产品支持用户与展示内容进行实时交互多人共同观看同一混合现实内容、支持即时通讯和直播虚实融合的教学指导，提高培训交流效率互动性的趣味教学方式，提升培训效果项目方案项目成果案例展示（四）：中国美术学院互动教学平台解决方案案例展示（五）：电力设备倒闸培训解决方案倒闸操作在生产供电、生命财产安全方面起着重

18、要作用。目前电气设备倒闸培训理论性强、不直观、无法监督模拟操作是否到位。项目方案构成2项目展示34项目成果项目背景1基于AR眼镜的实操培训操作票步骤指导操作直观可视化的倒闸指导智能判断并提醒错误操作全信息评价系统提供智能眼镜设备G2*硬件设备stARemote/stARview/stARstudio*软件工具*平台端课件制作、培训评价、报告查询、视频查询、*客户端步骤引导、操作票语音播报、设备自动识别可视化指导、刀闸状态监测、作业评分、报告生成、视频回传。案例展示（六）：上海电力智能联合巡检平台解决方案业务应用结合AR、红外、可见光等设备达到巡检作业自动化全平台包括监控预警、远程协助、辅助巡检自动更新实现系统管理一体化全平台统一监管、检测规范实现设备服务标准化巡检数据自动读取上传，实现业