课题一：大范围复杂场景视觉大数据的透彻感知理论

课题编号

01

课题承担单位

清华大学

课题参与单位

北京大学、中国科学院自动化研究所、南京理工大学、西安交通大学

课题研究内容

本课题拟结合计算机视觉、数据科学、认知科学和神经生物学等最新研究成果和相关技术，研究数据-任务双驱动的视觉大数据特征表达深度学习方法，该方法利用人类视觉感知逐步特征化和抽象化的机理，模拟视觉信息通路上施加自上而下的信息调控，实现多颗粒度视觉信息在深度网络中协同与融合。借鉴人类序化颗粒度认知能力，建立基于序化颗粒度的排序决策与分级决策模型，提出优于现有基于近似精度和近似质量的评价新方法，为大范围复杂视觉大数据的颗粒度自适应分析建模提供理论依据与技术支持。该方法具有可行性、创新性和先进性。

课题负责人

周杰

课题骨干

姓名	职务/职称	单位
周杰	教授	清华大学
鲁继文	副教授	清华大学
英向华	教授	北京大学
赫然	研究员	中国科学院自动化研究所
唐金辉	副院长	南京理工大学
郭振华	副研究员	清华大学
张曼	助理研究员	中国科学院自动化研究所
袁泽剑	副教授	西安交通大学

课题二：个体视觉大数据的透彻感知技术

课题编号

02

课题承担单位

中国科学院自动化研究所

课题参与单位

北京航空航天大学、中山大学、北京中科虹霸科技有限公司、北京海鑫科金高科技股份有限公司

课题研究内容

本课题提出多模态生物特征大数据驱动的信息融合方法，采用竞争型神经网络充分发掘虹膜人脸步态多模态生物特征的互补关联信息，技术路线符合“大数据+深度学习”的国际主流技术发展方向。多模态生物特征图像并行输入竞争型神经网络后，通过竞争学习机制逐层选择最优特征表达和融合方式，实现多层次深度融合。为同时实现身份识别和属性分析，引入多任务反馈信息，挖掘不同任务之间的共性信息，实现任务间的互惠互利、合作共赢，我们的研究方法具有可行性、创新性和先进性。

课题负责人

王亮

课题骨干

姓名	职务/职称	单位
王亮	研究员	中国科学院自动化研究所
王蕴红	副院长	北京航空航天大学
郑伟诗	副所长	中山大学
马力	总经理	北京中科虹霸科技有限公司
夏榆滨	副教授	北京航空航天大学
何召峰	副总经理	北京中科虹霸科技有限公司
郑逢德	经理	北京海鑫科金高科技股份有限公司
王威	副研究员	中国科学院自动化研究所
李海清	助理研究员	中国科学院自动化研究所
何智翔	经理	北京海鑫科金高科技股份有限公司
孙运莲	博士后	中国科学院自动化研究所

课题三：群体视觉大数据的透彻感知技术

课题编号

03

课题承担单位

上海交通大学

课题参与单位

中山大学、中国科学院自动化研究所、天津中科智能技术研究院有限公司

课题研究内容

本课题前期所提出的组群行为多层次条件场模型，完全符合真实物理世界中群体行为、事件所体现的多尺度组群属性，极大提高了模型可行性；所提出的基于深度学习与非参数化区域匹配模型，根本上突破了传统的基于目标检测的人群密度估计方法无法处理高密度、大遮挡、高动态人群的瓶颈，已经在高密度人群统计方向取得了目前业界最高的检测精度；所提出的跨视域的目标重识别技术，发展了面向目标重识别的先进度量学习计算模型，为群体目标重识别提供了有力的理论和技术支撑。本课题创新性地提出了协同关联多摄像机（固定相机和移动相机）可视群体信息感知理论和技术的研究方案，使用概率图模型对群体进行建模，通过多视图技术融合描述同一事件的多元信息，有望取得群体视觉大数据透彻感知的重大突破。我们的研究方法具有可行性、创新性和先进性。

课题负责人

杨小康

课题骨干

姓名	职务/职称	单位
杨小康	教授	上海交通大学
赖剑煌	教授	中山大学
倪冰冰	研究员	上海交通大学
黄永祯	副研究员	中国科学院自动化研究所
孙哲南	研究员	中国科学院自动化研究所
张德馨	副院长	天津中科智能技术研究院有限公司
王昌栋	讲师	中山大学
董晶	副研究员	中国科学院自动化研究所

课题四：场景视觉大数据的透彻感知技术

课题编号

04

课题承担单位

西安交通大学

课题参与单位

中山大学、清华大学、中国科学院自动化研究所、中科唯实科技（北京）有限公司

课题研究内容

在场景透彻感知方面，将基于特征点匹配的互联网图片定位方法引入广域相机网络联合标定领域具有很高的可行性和先进性；国际上在引入强先验知识构建室内场景三维模型方面已经取得很高性能，在室外大场景建模中应用这种思想具有很高的可行性和先进性；通过底层跨场景视觉元素时空关联，中层的语法范式描述框架和上层的基于视觉特征抽象表达的定位、搜索和时空演化分析，实现多层次信息的提取和相互促进，充分挖掘了语义信息的结构化特性，并且兼顾了处理速度、精度和鲁棒性等各个方面的应用需求，方法可行性高，并且具有很高的先进性。

课题负责人

薛建儒

课题骨干

姓名	职务/职称	单位
薛建儒	教授	西安交通大学
郑南宁	院士	西安交通大学
王进军	教授	西安交通大学
林倞	教授	中山大学
冯建江	副教授	清华大学
张俊格	助理研究员	中国科学院自动化研究所
梅魁志	教授	西安交通大学
曹黎俊	总监	中科唯实科技（北京）有限公司
刘剑毅	副教授	西安交通大学
赵虹	副教授	清华大学
刘中常	副研究员	中山大学
李冠彬	副研究员	中山大学

课题五：大范围场景透彻感知的验证系统和示范应用

课题编号

05

课题承担单位

中国科学院自动化研究所

课题参与单位

佳都新太科技股份有限公司、中兴通讯股份有限公司、公安部第一研究所

课题研究内容

本课题选择人流聚集的典型公共场所（如火车站、机场、体育场等）建设“透明空间”验证系统，实现大范围场景中“个体-群体-场景”的多层次立体化的协同感知、可视化以及综合信息检索功能，在技术方案上具有可行性和先进性。本项目参加单位公安部一所的全国公安图像信息部级联网平台在公安内网接入了全国28 个省区/直辖市的70 万路实时监控视频，佳都科技在广东、广西、新疆等地部署了50 万路的视频监控数据，中兴通讯在40 个国家120 多个城市部署了70 多万路视频监控数据，为课题目完成百万级终端视觉大数据的智能分析提供了应用渠道。

课题负责人

黄凯奇

课题骨干

姓名	职务/职称	单位
黄凯奇	研究员	中国科学院自动化研究所
陈晓棠	助理研究员	中国科学院自动化研究所
张少文	副总裁	佳都新太科技股份有限公司
董振江	副院长	中兴通讯股份有限公司
侯广琦	高级工程师	中国科学院自动化研究所
赵炫	副研究员	公安部第一研究所
康运锋	工程师	中国科学院自动化研究所
高燕	工程师	中兴通讯股份有限公司
赵刚	副总经理	佳都新太科技股份有限公司
高磊	副研究员	公安部第一研究所