杨聪副教授

杨聪，男，副教授，www.优德88.cpm -地平线智能驾驶生态创新中心主任。博士毕业于德国锡根大学（University of Siegen），师从Marcin Grzegorzek教授，研究方向为计算机视觉与模式识别。后在法国国家信息与自动化研究所（INRIA）进行博士后研究，师从Marie-Odile Berger教授，方向集中于计算机视觉并涉及多个学科的交叉。2017年回国，担任扩博智能（Clobotics）算法团队负责人，带领团队成功研发并交付了多个智能零售相关产品，客户包括可口可乐，尼尔森，沃尔玛，宝洁等。2019年加入地平线（Horizon Robotics），担任南京人工智能高等研究院高级研究员，带领团队深度参与了地平线征程2-5代芯片在智能驾驶领域的落地与量产，也使得长安UNI-T成为首款搭载国产人工智能芯片的智能汽车。在此期间，他还设计并提出了多个基于国产大算力芯片的参考算法包。杨聪博士先后在IJCV，TVCG, TIP，ACM MM，TITS，ECCV, PR等国内外知名期刊或会议发表学术论文近60篇，专著2本，主编教材4部，专利近40个（含美国专利4个），并担任TVCG，TII，TITS等多个期刊/会议审稿人。杨聪博士注重产学研结合，并与国外多所高校长期保持学术合作，目前主要研究方向为：计算机视觉，机器学习，智能驾驶、基于国产大算力芯片的智能感知等。

English website:https://cong-yang.github.io/（最新科研进展）

Looking for post-doc, PhD, and M.Sc. candidates, top-tier (high GPA/proved research capability) undergraduates, who are interested in computer vision and machine learning, especially for solving real-industrial problems. Please send me up-to-date resume via cong.yang AT suda.edu.cn.

代表成果（* Corresponding）Full publication list is detailed inGoogle Scholar

• [1]杨聪（专著），《智能座舱开发与实践》，机械工业出版社，2022.（十佳汽车好书，京东）

• [2]杨聪主编（教材），《智能驾驶与机器视觉》，机械工业出版社，2024.（2024年6月出版发行）

• [3]杨聪主编（教材），《智能驾驶与人机交互》，机械工业出版社，2024.（2024年8月出版发行）

• [4]杨聪主编（教材），《智能驾驶与三维重建》，机械工业出版社，2024.（2024年9月出版发行）

• [5]杨聪主编（教材），《智能驾驶与计算架构》，机械工业出版社，2024.（2024年10月出版发行）

• [6]Cong Yang（专著）, Object Shape Generation, Representation and Matching, Logos Verlag Berlin, 2016, ISBN: 978-3-8325-4399-0.（Amazon链接）

• [7] Ruohong Mei, Wei Sui, Jiaxing Zhang, Xue Qin, Gang Wang, Tao Peng, Tao Chen andCong Yang (*通讯作者), RoMe: Towards large scale road surface reconstruction via mesh representation, IEEE Transactions on Intelligent Vehicles (T-IV), pp 1-12, 2024. （中科院一区，IF=14.0）

• [8] Chenyao Yu, Yingfeng Cai, Jiaxin Zhang, Hui Kong, Wei Sui andCong Yang（*通讯作者）, VRSO: Visual-Centric Reconstruction for Static Object Annotation, IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS 2024), pp 1-6, 2024.（机器人及智能驾驶顶会）

• [9] Jiaxin Zhang, Shiyuan Chen, Haoran Yin, Ruohong Mei, Xuan Liu Liu,Cong Yang（*通讯作者）and Wei Sui, A Vision-Centric Approach for Static Map Element Annotation, IEEE International Conference on Robotics and Automation (ICRA 2024), pp 1-7, 2024.（机器人及智能驾驶顶会）
  

• [10]Cong Yang, Hua Zhou, Xun Liu, Yan Ke, Tao Chen and John See, BladeView: Towards Automatic Wind Turbine Inspection with Unmanned Aerial Vehicle, IEEE Transactions on Automation Science and Engineering (T-ASE), pp 1-12, 2024. （中科院一区, IF=5.6）

• [11]Cong Yang, Bipin Indurkhya, John See, Bo Gao, Yan Ke, Zeyd Boukhers, Zhenyu Yang and Marcin Grzegorzek, Skeleton Ground Truth Extraction: Methodology, Annotation Tool and Benchmarks, International Journal of Computer Vision (IJCV), 132(4), pp 1219-1241, 2024. （CCF A, IF=19.5）

• [12]Cong Yang, Xun Liu, Hua Zhou, Yan Ke and John See, Towards Accurate Image Stitching for Drone-based Wind Turbine Blade Inspection, Renewable Energy, 203, pp 267-279,2023. (中科院一区，IF=8.634).

• [13]Cong Yang, Zhenyu Yang, Yan Ke, Tao Chen, Marcin Grzegorzek and John See, Doing More with Moiré Pattern Detection in Digital Photos, IEEE Transactions on Image Processing, 32, pp 694-708, 2023. （中科院一区，CCF A，IF=11.041）

• [14]Cong Yang, Zhenyu Yang, Weiyu Li and John See, FatigueView: A Multi-Camera Video Dataset for Vision-based Drowsiness Detection, IEEE Transactions on Intelligent Transportation Systems, 24(1), pp 233-246, 2022. (中科院一区, IF=9.551)

• [15]Cong Yang, Bipin Indurkhya, John See and Marcin Grzegorzek, Towards Automatic Skeleton Extraction with Skeleton Grafting, IEEE Transactions on Visualization and Computer Graphics, 27(12), pp 4520-4532, 2021. (中科院一区，CCF A, IF= 5.226)

• [16]Cong Yang, Olaf Flak and Marcin Grzegorzek, Representation and matching of team managers: An experimental research, IEEE Transactions on Computational Social Systems, pp 311-323, 2018. (CAA A, IF=4.747)

• [17]Cong Yang, Oliver Tiebe, Kimiaki Shirahama and Marcin Grzegorzek, Object matching with hierarchical skeletons, Pattern Recognition, pp 183-197, 2016. (中科院一区，IF=8.0)

• [18] Yulu Zhang, Liang Sang, Marcin Grzegorzek, John See andCong Yang(*通讯作者), BlumNet: Graph Component Detection for Object Skeleton Extraction, ACM Multimedia, pp 5528-5536, 2022. （CCF A）

• [19] Kai Leng,Cong Yang(*通讯作者), Wei Sui, Jie Liu and Zhijun Li(*), SiTPose: A Siamese Convolutional Transformer for Relative Camera Pose Estimation, IEEE International Conference on Multimedia and Expo (ICME 2023), pp 1-6, 2023. （CCF B）

• [20] R. Sun, C. Qian, C. Zhu, W. Sui, Z. Boukhers andCong Yang (*通讯作者). YawnNet: A Visual-Centric Approach for Yawning Detection. International Conference on Multimedia Retrieval (ICMR), 1-4, 2024.（CCF B）
  

• [21]Cong Yang, Wenfeng Wang, Yunhui Zhang, Zhikai Zhang, Lina Shen, Yipeng Li and John See, MLife: a lite framework for machine learning lifecycle initialization, Machine Learning, pp 1-21, 2021. (CCF B, IF=5.414)

• [22] Zhiming Chen, Kean Chen, Weiyao Lin, John See, Hui Yu, Yan Ke andCong Yang(*通讯作者), PIoU Loss: Towards Accurate Oriented Object Detection in Complex Environments, European Conference on Computer Vision (ECCV 2020), pp 1-17, 2020. (CCF B，机器视觉三大顶会)

• [23]Cong Yang, Oliver Tiebe, Kimiaki Shirahama, Ewa Lukasik and Marcin Grzegorzek,Evaluating contour segment descriptors, Machine Vision and Applications, pp 373-391, 2017. (CCF C, IF=2.983)

• [24]Cong Yang, Christian Feinen, Oliver Tiebe, Kimiaki Shirahama and Marcin Grzegorzek, Shape-based object matching using interesting points and high-order graphs, Pattern Recognition Letters, PP 251-160, 2016. (CCF C, IF=4.757)

• [25]Cong Yang, Christian Feinen, Oliver Tiebe, Kimiaki Shirahama and Marcin Grzegorzek, ACM International Conference on Multimedia Retrieval (ICMR 2015), pp 519-522, 2015. (CCF B)

• [26]Cong Yang, Oliver Tiebe, Pit Pietsch, Christian Feinen, Udo Kelter and Marcin Grzegorzek, Shape-based object retrieval by contour segment matching, International Conference on Image Processing (ICIP 2014),pp 2202-2206, 2014. (CCF C)

• [27]Cong Yang, Chen Li, Oliver Tiebe, Kimiaki Shirahama and Marcin Grzegorzek, Shape-based classification of environmental microorganisms, International Conference on Pattern Recognition (ICPR 2014), pp 3374-3397, 2014. (CCF C)

研究领域

人工智能，计算机视觉，机器学习（含深度学习），智能驾驶

在研课题

1. 舱驾一体关键技术研究

（1）研究内容

基于国产大算力芯片智能驾驶（自动驾驶、智能座舱、智能泊车）关键技术研发与生态拓展：

1. 基于国产大算力芯片的舱内外视觉融合感知

2. 基于视觉的4D标注框架及关键算法

3. 面向J/X系列芯片的智能驾驶生态拓展，包括教材撰写、参考算法开发等

（2）代表论文（* 通讯作者）

[1]杨聪等编著，《智能座舱开发与实践》，机械工业出版社，2022. （2023年全国十佳汽车图书）

[2]杨聪等编著，《智能驾驶与机器视觉》，机械工业出版社，2024.（2024年1月份出版发行）

[3]Cong Yang, Zhenyu Yang, Weiyu Li and John See, FatigueView: A Multi-Camera Video Dataset for Vision-based Drowsiness Detection, IEEE Transactions on Intelligent Transportation Systems, pp 233-246, 2022. (中科院一区, IF=9.551)

[4]Cong Yang, Wenfeng Wang, Yunhui Zhang, Zhikai Zhang, Lina Shen, Yipeng Li and John See, MLife: a lite framework for machine learning lifecycle initialization, Machine Learning, pp 1-21, 2021. (CCF B, IF=5.414)

[5] Ruohong Mei, Wei Sui, Jiaxin Zhang, Xue Qin, Gang Wang, Tao Peng andCong Yang(*), RoMe: Towards Large Scale Road Surface Reconstruction via Mesh Representation, IEEE Transactions on Intelligent Vehicles, pp 1-11, 2024. （中科院二区，IF=8.2）

（3）代表专利

[1] Cong Yang; Zhenyu Yang; Weiyu Li，Fatigue state detection method and apparatus, medium, and electronic device，US11580757B2（美国专利），2023/2/14

[2] Cong Yang; Yunhui Zhang; Zhikai Zhang，Machine Model Update Method and Apparatus, Medium, and Device，US20220198331A1（美国专利），2022/6/23

[3] Yunhui Zhang; Zhikai Zhang; Cong Yang，Behavior Recognition Method and Apparatus, Medium, and Electornic Device，US20220188537A1（美国专利），2022/6/16

[4] 杨聪; 杨振宇; 李威宇，疲劳状态检测方法、装置、介质及电子设备，CN112528792A（中国专利），2021/3/19

[5] 杨聪; 张运辉; 张致恺，机器模型的更新方法、装置、介质及设备，CN112541447A（中国专利），2021/3/23

（4）媒体报道（摘选与本成果相关）

1. 长江日报：http://cjrb.cjn.cn/html/2024-04/16/node_8.htm

2. 汽车评价：https://mp.weixin.qq.com/s/_uc1Zvahmh1t7Lkaem68nA

3. 汽车之心：https://mp.weixin.qq.com/s/izy7IIROdsWtzQ2zeSukYw

4. 亿欧网：https://mp.weixin.qq.com/s/yCD6jiBseBf1jhoTzL1mgw

2. 面向零售场景的视觉感知关键技术研究

（1）研究内容

零售场景中的视觉感知关键技术包括：

1. 超宽视距下的高精度图像拼接算法（Wide Parallax Image Stitching）

2. 大规模细粒度商品检测与分类算法（Large-Scale Fine-grained SKU Recognition）

3. 图像质量检测与恢复算法（Image Quality Evaluation and Restoration）

（2）代表论文（*通讯作者）

[1]Cong Yang, Bipin Indurkhya, John See, Bo Gao, Yan Ke, Zeyd Boukhers, Zhenyu Yang and Marcin Grzegorzek, Skeleton Ground Truth Extraction: Methodology, Annotation Tool and Benchmarks, International Journal of Computer Vision (IJCV), pp 1-23, 2023. （CCF A, IF=19.5）

[2]Cong Yang, Zhenyu Yang, Yan Ke, Tao Chen, Marcin Grzegorzek and John See, Doing More with Moiré Pattern Detection in Digital Photos, IEEE Transactions on Image Processing, pp 694-708, 2023. （中科院一区，CCF A，IF=11.041）

[3]Cong Yang, Bipin Indurkhya, John See and Marcin Grzegorzek, Towards Automatic Skeleton Extraction with Skeleton Grafting, IEEE Transactions on Visualization and Computer Graphics, pp 4520-4532, 2021. (中科院一区，CCF A, IF= 5.226)

[4]Cong Yang, Oliver Tiebe, Kimiaki Shirahama and Marcin Grzegorzek, Object matching with hierarchical skeletons, Pattern Recognition, pp 183-197, 2016. (中科院一区，IF=8.0)

[5] Zhiming Chen, Kean Chen, Weiyao Lin, John See, Hui Yu, Yan Ke andCong Yang(*), PIoU Loss: Towards Accurate Oriented Object Detection in Complex Environments, European Conference on Computer Vision (ECCV 2020), pp 1-17, 2020. (CCF B)

（3）代表专利

[1] 杨聪; 柯严，模型训练用图像的快速扩充方法、系统、设备及存储介质，CN108647553B（中国专利），2022/1/25

[2] 杨聪; 柯严，商品与标签的自动关联方法、系统、设备及存储介质，CN108416403B（中国专利），2021/5/4

[3] 杨聪; 唐健; 柯严; 严治庆，图像识别模型的训练方法、系统、设备和存储介质，CN111027621A（中国专利），2020/4/17

[4] 杨聪; 姚阳; 桑亮; 刘鸣洲; 柯严; 严治庆，带有摩尔纹的图片生成方法、系统、设备和存储介质，CN110992244A（中国专利），2020/4/10

[5] 杨聪; 王家豪; 李福辉; 柯严; 严治庆，货架空缺位置商品信息获取方法、系统、设备及存储介质，CN110516628A（中国专利），2019/11/29

（4）媒体报道（摘选与本成果相关）

1. 上海市信息服务业行业协会：https://mp.weixin.qq.com/s/-R4q9GgN_4qtB7CNbOSLgQ

2. 36氪：https://mp.weixin.qq.com/s/pxTLgOJounIpff-uZ_hNmw

3. 长宁区江苏社区发布：https://mp.weixin.qq.com/s/5UriubalfZCb_LYg9rPMfg

3. 基于空地协同的智能风电“巡检修”关键技术研究

（1）研究内容

智能风电“巡检修”关键技术包括：

1. 高空强干扰条件下全自动目标巡检数据采集技术

2. 数智化风电设备运维管理平台系统

3. 智能异形检修机器人多功能集成技术

（2）代表论文（* 通讯作者）

[1]Cong Yang, Xun Liu, Hua Zhou, Yan Ke and John See, Towards Accurate Image Stitching for Drone-based Wind Turbine Blade Inspection, Renewable Energy, pp 267-279, 2023. (中科院一区，IF=8.634).

[2]Cong Yang, Hua Zhou, Xun Liu, Yan Ke, Tao Chen and John See, BladeView: Towards Automatic Wind Turbine Inspection with Unmanned Aerial Vehicle, IEEE Transactions on Automation Science and Engineering (T-ASE), pp 1-12, 2023. （中科院一区, IF=5.6）

[3] Yulu Zhang, Liang Sang, Marcin Grzegorzek, John See andCong Yang(*), BlumNet: Graph Component Detection for Object Skeleton Extraction, ACM Multimedia, pp 5528-5536, 2022. （CCF A）

[4] Imad Gohar, Abderrahim Halimi, John See, Weng Kean Yew andCong Yang. Slice-Aided Defect Detection in Ultra High-Resolution Wind Turbine Blade Images Machines 11, no. 10: 953, 2023.

[5] Yuxi Li, Weiyao Lin, John See, Ning Xu, Shugong Xu, Ke Yan andCong Yang, CFAD: Coarse-to-Fine Action Detector for Spatiotemporal Action Localization, European Conference on Computer Vision (ECCV 2020), pp 1-17, 2020.

（3）媒体报道（摘选与本成果相关）

1. 中国工业报/新华社客户端：https://h.xinhuaxmt.com/vh512/share/10684496?channel=weixin

2. 36氪：https://36kr.com/newsflashes/2073194043292800?channel=wechat

3. 极客公园：https://mp.weixin.qq.com/s/LYyTDpnwvg0fgBffO-q1_Q

4. 长宁区工商联：https://mp.weixin.qq.com/s/VAzHFBhmJ6lmf12ZxPCiyA

5. 环球网：https://m.huanqiu.com/article/48AAKRlvxJs

欢迎对机器学习、计算机视觉及自动驾驶感兴趣的学生或相关领域优秀青年加入本团队！

（1）招生方向：机器视觉，智能驾驶，机器学习，边缘计算（基于国产大算力芯片），人工智能。

（2）提供平台：www.优德88.cpm -地平线智能驾驶联合实验室，www.优德88.cpm -扩博智能机器视觉联合实验室。每人提供5千至1万元科研经费在读研期间参加学术会议使用；保研学生在大三下学期开始提前预培养，可提前进入实验室学习（线上或线下）进行毕业设计、课题预研及全方面能力提升。

（3）重要素质：踏实勤奋、积极上进。读研期间表现突出者，将推荐申请研究生奖学金、科研基金、额外提供科研补贴、奖励以及优先赞助其参加海内外学术交流和赴海外知名高校深造。

（4）深造机会：本团队常年与国内C9高校团队及德国、法国、美国、日本、澳门、波兰多所知名高校/研究所密切合作，优秀学生推荐深造。

Looking for post-doc, PhD, and M.Sc. candidates, top-tier (high GPA/proved research capability) undergraduates, who are interested in computer vision and machine learning, especially for solving real-industrial problems. Please send me up-to-date resume via cong.yang AT suda.edu.cn.

常年招收（推免）研究生/实习生/访问学生

团队成员：

Research Collaborators (partial)

Marcin Grzegorzek University of Lübeck	Zeyd Boukhers Fraunhofer FIT	John See Heriot-Watt University	Bipin Indurkhya Jagiellonian University
Yan Ke Clobotics	Marie-Odile Berger INRIA	Kimiaki Shirahama Doshisha University	Gilles Simon University of Lorraine

团队竞赛动态（杨聪指导）：

8.2024年中国机器人及人工智能大赛（榜单赛事）：恭喜本组本科生杨昕宇、朱辰宇、孙若希在人工智能创新赛道中荣获江苏省一等奖（推荐国赛）！（省一）

7.2024年中国机器人及人工智能大赛（榜单赛事）：恭喜本组本科生吴超然、王云阗、王天予在百度 Apollo星火自动驾驶赛道中荣获江苏省一等奖（推荐国赛）！（省一）

6.2024年中国机器人及人工智能大赛（榜单赛事）：恭喜本组本科生侯先豹、金计越、汪子琛在百度 Apollo星火自动驾驶赛道中荣获江苏省一等奖（推荐国赛）！（省一）

5.2024中国机器人大赛暨Robocup机器人世界杯中国赛（榜单赛事）：恭喜本组本科生王云阗，施刘毅，邓子昌，陈恺，李心洁同学在机器人先进视觉赛-3D识别项目荣获全国一等奖！（国一）

4.2023全国大学生物联网设计大赛竞赛（榜单赛事）：恭喜本组本科生钟周汉、卞佳俊、徐俊祺、史君安“基于对抗神经网络电瓶车进楼入户预警系统”华东赛区一等奖、国家三等奖！（省一、国三）

3.2023全国大学生计算机设计大赛（榜单赛事）：恭喜本组本科生唐沛、韩洪润、后灵佳同学作品“2035远景规划下国内芯片发展现状及前景”荣获江苏省三等奖、国家三等奖！（省三、国三）

2.2023首届OPEN AIGC开发者大赛： 恭喜本组本科生后灵佳、徐俊祺、史君安、王吕呈同学在2023年第一届OPEN AIGC开发者大赛中荣获优秀作品奖！（国优）

1.各届蓝桥杯（榜单赛事）：徐俊祺（省三）、李宏城（省三）

团队科研动态（杨聪通讯）：

9.论文- 恭喜本组本科生及研究生李卓承、沈西竹、栾思敏、郭树伟同学论文《Moiré Pattern Detection: Stability and Efficiency with Evaluated Loss Function》被模式识别著名会议ICPR 2024录用！（CCF C类）

8.项目- 恭喜本组本科生徐俊祺、王吕呈、黄碧莹同学的“基于检索生成增强技术的医保大模型研究与应用”获批校级大学生创新创业训练计划项目！（校级）

7.项目- 恭喜本组本科生朱辰宇、杨昕宇、钱聪、孙若希、徐俊祺同学项目“基于多粒度特征的自适应疲劳感知方法研发”获批国家级大学生创新创业训练计划项目！（国家级）

6.论文- 恭喜本组研究生蔚晨垚同学论文《VRSO: Visual-Centric Reconstruction for Static Object Annotation》被机器人顶会IROS 2024录用！（机器人顶会）

5.论文- 恭喜本组成员梅若鸿论文《RoMe: Towards Large Scale Road Surface Reconstruction Via Mesh Representation》被智能汽车顶刊IEEE T-IV录用！（中科院一区）

4.论文- 恭喜本组本科生孙若希、杨昕宇、朱辰宇、钱聪同学论文《YawnNet: A Visual-Centric Approach for Yawning Detection》被多媒体检索顶会ICMR 2024录用！（多媒体检索顶会）

3.论文- 恭喜本组成员张家馨论文《A Vision-Centric Approach for Static Map Element Annotation》被机器人顶会ICRA 2024录用！（机器人顶会）

2.论文- 恭喜本组研究生冷凯同学论文《SiTPose: A Siamese Convolutional Transformer for Relative Camera Pose Estimation》被ICME 2023录用！（CCF B类）

1.论文- 恭喜本组研究生陈世源同学论文《Pedestrian Collision Prediction Using a Monocular Camera》被iWOAR 2023录用！（EI）

杨聪老师教学动态：

12. 武汉《长江日报》：长江日报整版报道杨聪教授团队工作（报道，2024）

11. 杨聪老师在2024全国高校走进苏州特色产业研学活动（教育部高等学校计算机类专业教学指导委员会、全国高等学校计算机教育研究会主办）中受邀做了“基于国产大算力芯片的智能驾驶生态拓展”主题报告（报道，2024）

10. 杨聪老师受邀在中国科学院深圳先进技术研究院/深圳理工大学做了“面向智能座舱与智能风电的关键视觉算法研究”学术报告（学术报告，2024）

9. 未来科学与工程学院：杨聪老师团队本科生论文被多媒体检索顶会接收（报道，2024）

8. 未来科学与工程学院：未来科学与工程学院师生赴南京地平线公司参观交流（报道，2024）

7. www.优德88.cpm ：杨聪教改论文《基于国产大算力芯片的智能驾驶课程体系建设》被《高等工程教育研究》（北大南大双核心，人文社科A类，CSSCI来源）录用（教改，2024）

6. 杨聪老师在International Conference on High Performance Big Data and Intelligence Systems（HDIS 2023）做了“Human-Computer Interaction in Intelligent Cockpit”的特邀报告（Invited Speaker，2023）

5. 杨聪老师在第十五届国际汽车技术年会（IAC）做了“智能座舱中的人机交互技术”学术报告（学术报告，2023）

4. www.优德88.cpm ：杨聪课程思政论文《智能驾驶课程思政元素库构建研究》被《高教学刊》（双一流·中文核心期刊，人文社科A类扩展）录用（教改，2023）

3. 未来科学与工程学院：“实战”教学，教在“实”处，我院师生的暑期打开方式（报道，2023）

2. 未来科学与工程学院：未来科学与工程学院师生赴上海扩博智能公司参观交流（报道，2023）

1. 苏大国际：www.优德88.cpm 国际学生参加“感知中国丝路行”社会实践活动（报道，2022）