项目简介:
3D显示已成为显示技术发展的主流。本团队经过多年的联合攻关,攻克、掌握了基于深度图像绘制、深度估计、超高清多视点视图合成、超高清裸眼3D全贴合及校准等多项关键技术;已完成了多种3D显示系统开发,包括基于深度图像绘制的视图合成系统、实时2D转3D系统、超高清裸眼3D显示系统等。
基于深度图像绘制(depth-image-basedrendering, DIBR) 系统完成了全高清DIBR系统开发,并在此基础上开发了一套2D转3D系统。该系统只需要传输一路视频流及对应的深度信息,减少了传输带宽。此外,该系统能够方便地实现3D显示的深度调节、2D-3D视频转换,以及方便地支持各种裸眼3D显示器。

超高清多视点裸眼3D显示一体机完成了一体机研发。研发的机型支持各种显示分辨率、支持多视点融合、支持基于Android、FPGA的一体机实时架构。产品采用全贴合及校准工艺,能够实现显示屏幕与浮点型柱镜光栅的的最佳匹配。
项目二、智能高仿人聊天机器人(YUKi)
项目简介:
YUKI是一款具有人工智能的高仿人机器人。她集语音识别技术、语音合成技术、自然语音处理技术、人脸识别技术,情绪识别技术、及机器人控制技术于一体。机器人能够精准地识别出非特定人的语音,理解语义,作出智能地回答,情绪多变的与人进行流畅地聊天。同时,互动者还可以向机器人查询天气,了解天气状况,让机器人播报音乐,尽情享受;以及咨询各种百科问题,解决疑惑。此外,机器人具备人脸识别和情绪识别的功能,能根据你的言语够认识出你并且了解你的心情。目前,智能高仿人聊天机器人实物样机1套,申报国家发明专利4项,撰写高水平论文1篇(SCI检索)
项目三、智能扫雪机器人
项目简介:
在我国北部地区冬天路面积雪常常对人们交通出行造成阻碍,尤其是某些弯道、交叉路口以及坡道等地经常会导致交通事故的发生,为人们生产、生活、出行带来很多不便。如今城市道路除雪是市政部门的一个难题,目前主要靠人工或者传统的扫雪车完成除雪作业。这样的方式不仅效率低,而且需要投入大量的人力。因此,一款智能扫雪机器人应运而生。本机器人针对非完整履带式移动机器人进行轨迹控制过程中存在的诸多不确定性,设计引入了滑模控制算法;通过自适应模糊控制器来调整滑模控制器的增益值而得出在不同情况下滑模控制增益的优化估计,用来消除滑模控制存在的抖振现象及克服移动机器人系统存在的参数与非参数不确定性;控制算法使非完整轮式移动机器人对各种轨迹具有良好的跟踪效果,较普通PID控制算法具有明显的优越性。
项目四、智能隧道巡检无人机
项目简介:
近年来,无人机在简单已知的环境中已经应用于巡检工作,但还未在复杂未知环境中成功应用于巡检工作。飞行控制技术的发展使得无人机易于操控,无人机在架空输电线路巡检中应用日益广泛。为排除线路隐患,保障电力输送,国家电网几十万巡线工人为数百万千米的线路付出了艰辛的劳动。地下电缆隧道是城市供电的命脉,目前仍提升可靠性,降低人工巡检强度,在线监测系统和悬挂式电缆隧道巡检机器人开始以人工巡检为主,为保障可靠运行,巡检任务责任重大。为尽早排除隐患,辅助人工巡检电缆隧道。在线监测系统通常在隧道设计施工时统一规划部署,安装有视频、温度、气体等各类传感器,能实现全程24小时不间断监控。
项目五、针对散包装中药的智能配药系统
项目简介:
本中药智能配药系统是面向大中型医院中药房,集分布式协同控制、网络控制、机电一体化设计、多传感器信息融合于一体的智能化、综合性医用自动化系统。其设计目的为用于中医院自动化抓药、配药,医生将中药处方输入软件系统,在药剂师审核无误之后,系统就开始控制各个智能药柜进行自动配药工作,完成一副药剂配置的时间可以控制在十秒以内,患者能立即拿到自己的处方。本中药智能配药系统集成了配药管理信息服务系统、智能药柜系统、处方与收费审核系统,可与医院信息系统无缝对接,实现开处方、收费审核、智能配药一体化,具有效率高、占地小、综合成本低等优势。
项目六、高清视频视觉检测SoC实时处理系统
项目简介:
该系统采用美国TI公司先进的DM8168高清视频SoC芯片,可对摄像机输出的多种接口形式的高清视频进行实时采集、压缩编码和实时处理。该平台可替代基于工控机的传统机器视觉技术和设备,达到更高的图像和视频清晰度、缺陷识别处理的实时性和可靠性,具有优异的性价比、体积小、功耗低等多种优势,是全新在线机器视觉检测设备的实现方案。该技术成果在汽车多媒体电子系统、车载、船载及机载高清视频测量、处理与控制系统及消费电子等领域具有重大的推广价值。
一、DM8168处理器特性
TMS320DM8168是一款多核SoC,它集成了包括ARMCortex A8、DSPC674X+、HDVICP、HDVPSS等处理器,具有强大的高清视频处理性能。
二、DM8168核心处理板
CPU:ARMclk:1.2GHz、DSPclk:1GHz
DDR3-1600存储器100/1000M网口进行网络通讯与数据采集SATA接口供存储数据使用
三、高清视频采集处理
四、应用方案
相机接口方案一:CameraLink工业高清相机接口使用CycloneIV FPGA对LVDS解码后的视频信号进行特殊处理后送到dm8168,实现1080P60fps、720P60fps等高清视频的采集显示与实时编码。
相机接口方案二:色差高清视频接口使用TI的视频解码芯片TVP7002完美解决了视频ADC问题,并实现了1080P60fps的采集显示与实时编码功能。