PKU-VVT 施柏鑫长聘副教授

报告生成时间：2026年8月20日
个人主页：施柏鑫
所属团队：北京大学计算机学院视频与视觉技术研究所 / 视频与视觉技术国家工程研究中心

一、学者基本信息

项目	内容
姓名	施柏鑫（Boxin Shi）
职称	长聘副教授、研究员、博士生导师（北京大学"博雅青年学者"）
所属机构	北京大学计算机学院视频与视觉技术研究所（副所长）；多媒体信息处理全国重点实验室；视频与视觉技术国家工程研究中心
实验室	相机智能实验室（Camera Intelligence Lab，http://camera.pku.edu.cn）负责人
研究方向	计算摄像学（Computational Photography）、类脑视觉传感器（事件相机/脉冲相机）、神经形态相机高速光度属性分析、三维视觉、生成式人工智能、具身智能
教育背景	北京邮电大学学士（2007）、北京大学硕士（2010）、日本东京大学博士（2013，信息科学与技术）
学术兼职	IJCV 主编（2026年7月起，创刊近40年首位中国大陆高校主编）；TPAMI 编委（2023至今）；IJCV 编委（2020–2026）；CVPR/ICCV/ECCV 牵头领域主席（Lead Area Chair）
主要荣誉	CVPR 2024 与 ICCP 2015 最佳论文亚军（Best Paper Runner-Up）；日本大川研究助成奖（2021）；中国电子学会科学技术奖青年科学家奖（2024）；IJCV 2025年度杰出编委奖；北京市领军人才（高聚工程）；北京智源学者
代表性项目	科技创新2030—"新一代人工智能"重大项目首席科学家；国家自然科学基金重点项目负责人；国家级青年人才项目
学术组织	IEEE 高级会员、CCF 杰出会员、CSIG 高级会员、APSIPA 杰出讲者（Distinguished Lecturer）
论文规模	300余篇（截至2026年4月），含 TPAMI 37篇、IJCV 11篇、CVPR/ICCV/ECCV 论文125篇
其他身份	北大—智平方具身智能联合实验室主任；曾任北京大学人工智能研究院院长助理

二、教育背景与职业履历

教育经历（据北京大学计算机学院、人工智能研究院官方页面）：

2003–2007：北京邮电大学，工学学士；
2007–2010：北京大学，工学硕士。此阶段他已在视觉/媒体方向开展工作，其早期论文《Depth-Aware Stereo Video Retargeting》（CVPR 2012）与高文院士、黄铁军教授团队的李兵等人合作，可判断其硕士阶段在北京大学数字媒体研究所（高文/黄铁军领导的团队）完成（其硕士导师姓名未见官方公开明确记载，待进一步核实）；
2010–2013：日本东京大学，信息科学与技术博士。博士期间的核心成果为光度立体视觉（photometric stereo）与辐射度标定，代表性合作者包括东京大学的池内克史（Katsushi Ikeuchi，东大荣誉教授、时任东大教授）与松下康之（Yasuyuki Matsushita，时任微软亚洲研究院资深研究员、现任大阪大学教授）以及微软亚洲研究院的谭平。官方简历未公开标注导师姓名，但从其博士期间论文（如 TPAMI 2013《Radiometric Calibration by Rank Minimization》、TPAMI 2014《Bi-polynomial Modeling of Low-frequency Reflectances》均由池内克史作为资深作者署名）来看，其博士训练与池内克史—松下康这条日系计算视觉脉络关系密切（此为基于合作署名的推断，审慎参考）。

职业履历：

2013.10–2014.10：美国麻省理工学院媒体实验室（MIT Media Lab）博士后。此阶段与 Ramesh Raskar 领导的 Camera Culture 组合作，参与 Polarized 3D（ICCV 2015）、Modulo Camera（ICCP 2015 最佳论文亚军）等经典计算摄像工作，合作者还包括 Hang Zhao（赵航，现清华AIR/PKU STAR方向研究者）；
2014.10–2015.10：新加坡科技设计大学（SUTD）SUTD-MIT 联合博士后，合作者为杨学赛（Sai-Kit Yeung，现香港科技大学）；
2015.10–2016.03：新加坡南洋理工大学（NTU）博士后，与 Alex C. Kot 教授等合作；
2016.04–2017.11：日本国立产业技术综合研究所（AIST）人工智能研究中心研究员；
2017.11至今：北京大学（最初入职信息科学技术学院数字媒体研究所，现为计算机学院视频与视觉技术研究所）研究员、博士生导师，"相机智能"课题组/实验室负责人，后晋升长聘副教授；现任视频与视觉技术研究所副所长。期间曾兼任北京大学人工智能研究院院长助理、北京智源人工智能研究院青年科学家（智源学者）。

需要说明：用户背景中"北大博士""北大数学学院本科"的说法不准确——施柏鑫本科为北京邮电大学，博士为日本东京大学，北大为其硕士阶段母校。

三、学生培养情况

施柏鑫自2017年底独立建组以来，相机智能实验室已形成稳定的人才培养体系（据实验室官网 Team 页面，现有专职成员含博士后2人、博士生21人、硕士生7人）。代表性学生及去向：

于博涵（Bohan Yu）：2021级直博生（在读）。CVPR 2024 最佳论文亚军《EventPS: Real-Time Photometric Stereo Using an Event Camera》第一作者——该成果是北京大学历史上首次获得 CVPR 最佳论文（含提名）荣誉，也是中国大陆高校近十年首次以第一单位获奖。研究方向为事件相机光度立体视觉，被视为实验室的旗舰学生成果。
周矗（Chu Zhou）：2024年北京大学博士毕业，现于日本国立情报学研究所（NII）任项目助理教授。其在读期间与施柏鑫合作论文超过30篇（DBLP统计），是实验室产出最高的学生之一，研究涵盖 HDR 成像、光场、脉冲相机等。
翁书晨（Shuchen Weng）：2024年北京大学博士毕业，现任北京智源人工智能研究院（BAAI）研究科学家，延续其导师与智源的合作纽带。
林小涵（Xiaohan Lin）：2024年北京大学博士毕业，现任南湖实验室（嘉兴）研究员。
洪雨辰（Yuchen Hong）：2025年北京大学博士毕业（毕业感言中明确致谢"恩师施柏鑫"），现为中国南方电网工程师，博士期间主线方向为反射/反射去除成像。
汤佳骏（Jiajun Tang）：2025年北京大学博士毕业，现任 vivo 研究工程师。
常亚坤（Yakun Chang）：2022–2023年北京大学博雅博士后（合作导师施柏鑫），现为北京交通大学计算机学院长聘副教授（2026年起），DBLP 可查合作论文8篇左右。
樊斌（Bin Fan）：2023–2025年北京大学博士后（"博新计划"），现为西北工业大学教授，是实验室向国防军工院校输送的青年学术骨干。
梁锦秀（Jinxiu Liang）：2021–2025年北京大学博士后（EventPS 合作作者），现为日本国立情报学研究所（NII）项目研究员；合作论文逾20篇。

此外，硕士与本科毕业生去向包括：东京大学博士生（韩金）、UC Berkeley 博士生（顾超颖）、Rice/哥大/UT-Austin/UIUC 硕士，以及 vivo、字节跳动、DeepSeek、智谱（Zhipu）、商汤、旷视、长光卫星、国家电网等企业研发岗位（详见第五章）。

四、学术合作网络

4.1 师承与学术脉络（海外阶段）

东京大学（博士阶段）：与池内克史（Katsushi Ikeuchi）合作6篇（含 TPAMI 2013/2014 两篇）、与松下康之（Yasuyuki Matsushita，大阪大学教授）长期合作——DBLP 合著约29篇，跨越光度立体视觉、深度光度立体系列（DiLiGenT 数据集系列）、直到近年（CVPR 2024 DiLiGenRT 数据集仍在合作），是施柏鑫最持久的国际合作纽带。
MIT Media Lab（博士后）：与 Ramesh Raskar 合著7篇，包括 ICCP 2015 最佳论文亚军《Unbounded High Dynamic Range Photography Using a Modulo Camera》（与赵航等）与 ICCV 2015《Polarized 3D》——这两篇奠定了其在国际计算摄像学界的早期声誉。
新加坡（SUTD/NTU）：与 Sai-Kit Yeung 合著约10篇；与 NTU 的 Alex C. Kot 合著约27篇，多为反射去除、时尚检索等方向，同时与北京大学的段凌宇形成"北大—NTU"双枢纽合作。
日本 AIST：人工智能研究中心研究员经历，延续日本学术圈联系。

4.2 北京大学校内合作

黄铁军（计算机学院教授，视频与视觉技术国家工程研究中心原副主任）：校内最核心的长期合作者，DBLP 合著约19篇。自施柏鑫硕士阶段的 CVPR 2012 立体重定向论文起，到2017年回北大后深度参与黄铁军开创的脉冲相机（Spike Camera）研究体系：《Reconstructing Clear Image for High-Speed Motion Scene With a Retina-Inspired Spike Camera》（TCI 2020，与熊瑞勤、于肇飞、高文等）、《1000x Faster Camera and Machine Vision with Ordinary Devices》（2024年综述性论文，作者含黄铁军团队大部分骨干）、NeuroZoom、Spk2ImgMamba、Spike-RGB 混合 1000FPS HDR 视频等。两人还共同担任北大—智平方具身智能联合实验室的主任与名誉主任，并同获2024年度中国电子学会科学技术奖（黄铁军获创新成就奖、施柏鑫获青年科学家奖）。
高文（院士）：合著3篇（CVPR 2012、TCI 2020 脉冲相机论文、TPAMI 反射去除），主要作为团队领导出现在合作链中。
王亦洲（计算机学院教授）：合著2篇，均为事件相机去模糊与高帧率视频生成方向（《Learning to Deblur and Generate High Frame Rate Video with an Event Camera》及其期刊扩展版，第一作者为其博士生陈浩宇），体现事件相机研究上的协同。
陈宝权（计算机学院教授，前沿计算研究中心主任）：直接合著1篇 TPAMI 2023《MILO: Multi-Bounce Inverse Rendering for Indoor Scene With Light-Emitting Objects》（与其学生于博涵、杨思祺及陈宝权团队博士生董思言合作）。施柏鑫本人确与北京大学前沿计算研究中心（CFCS）有制度性联系——他担任 CFCS"图灵班"科研指导教师（Turing Program Research Advisor），但并非 CFCS 的在编 PI。
段凌宇（计算机学院教授）：合著约23篇，是其回北大前后（及NTU时期）的多媒体/反射去除方向主要合作者（CoRRN、FHDe2Net 等 TPAMI 论文）。
张史航杭（Shanghang Zhang，智能学院长聘副教授）：合著约6篇，为当前具身智能/VLA方向的合作主力（Lift3D-VLA、TACO、Video2Act、SpikeNVS、V2X 可见光背向散射通信等），是北大—智平方联合实验室相关成果的重要合作者。
其他校内合作者还包括熊瑞勤（王选所/计算机学院，脉冲相机重建）、于肇飞（前沿计算学科中心，脉冲相机）、徐晨然（信息科学技术学院，V2X通信）等，显示出其"新形态相机+AI"研究在北大内部的多点开花。

4.3 跨机构与国际合作

李思（北京邮电大学人工智能学院副教授，模式识别实验室）：DBLP 合著约43篇（含预印本），是当前规模最大的外部合作者，覆盖偏振成像（SfPUEL、PolGS 系列）、语言驱动上色（L-C4/L-CAD 系列）、视频生成（VIRES、STAGE、Audio-Sync Video Generation）等，双方多次以"北大相机智能实验室+北邮李思团队"名义联合发表（如 VIRES 联合贝式计算）。
任杰骥（上海交通大学副教授）：合著约11篇，是光度立体视觉基准数据集（DiLiGenT/DiLiGenT-π/DiLiGenT102/DiLiGenRT）和 EventPS/EventUPS 的核心合作者。
谭平（香港科技大学教授，原微软亚洲研究院）：合著约11篇，主要为其博士期及近年的光度立体与逆渲染合作（含近作 PacTure、VMINer）。
Kwan-Yee K. Wong（香港大学教授）：合著4篇（自标定深度光度立体网络系列，另含 Guanying Chen 等中生代合作者）。
Rui Chen（香港中文大学（深圳）副教授，原MSRA）：合著3篇（Deep Shape from Polarization、Physics-based Neural Networks for SfP 等）。
卢锋（北京航空航天大学教授）、林琳/朱琳（北京邮电大学）、松下康之团队（大阪大学）、AIST 等亦有持续合作；实验室毕业生高启尧（访问学生）赴东京大学读博，形成与日方的人员回流。
机构层面，实验室与上海人工智能实验室（施柏鑫曾受邀在"星河Talk"作神经形态相机报告）、香港中文大学（上海AI实验室双聘的薛天帆主持）等保持学术交流。

五、业界合作关系深度分析

5.1 联合实验室与深度产业合作

北大—智平方具身智能联合实验室（主任）：2025年4月17日在深圳揭牌，由北京大学与智平方（深圳）科技有限公司共建，名誉主任为黄铁军。施柏鑫出任首任主任，实验室聚焦 4D 世界模型、端到端智能体（VLA）等具身智能核心技术；双方此前已联合推出机器人操作大模型 RoboMamba。2026年4月，联合实验室在无锡梁溪科技城发布科研合作课题，探索"企业出题、政府领题、高校答题、市场阅卷"的政产学研新范式；施柏鑫在"创投中国"科创路演厅等场合系统介绍了实验室在数据获取、机器人抓取、VLA、新型传感器研发与成果转化方面的布局。智平方创始人郭彦东（北邮校友、普渡大学博士）与施柏鑫同列2025年斯坦福全球前2%顶尖科学家榜单，是该项目"学界—企业"双带头人的结构。
超高速脉冲相机产业化（科技部重大专项首席科学家）：其牵头科技创新2030—"新一代人工智能"重大项目，研制全高清超高速脉冲相机，应用于高速测量与高铁监测，被视为打破国外高清高速摄像垄断的关键技术（中国电子学会颁奖词明确记载）。这是其计算摄像研究成果向工业界落地的主线。
北京智源人工智能研究院（BAAI）：智源青年科学家/智源学者身份，博士生翁书晨毕业后入职智源，形成人才—成果双向通道。
OpenBayes 贝式计算：2024年前后，北大相机智能实验室联合贝式计算、北邮李思团队完成 CVPR 论文 VIRES（草图+文本引导视频实例重绘），并开源（GitHub/HuggingFace），是面向AI算力/工具链企业的典型合作。
AFAC 金融智能挑战赛：受邀担任 AFAC 大赛评审，公开评价该赛事为"衔接学界与业界的关键桥梁"，参与产学研人才培养生态。

5.2 人才输送与产业网络（据实验室 Alumni 页面）

毕业生（含硕士、博士、本科实习）去向构成一张覆盖头部科技公司的产业网络：

手机/消费电子与AI公司：vivo（汤佳骏、吕游伟两位研发工程师）、字节跳动（娄明、许烨闻）、DeepSeek（王炳宣）、智谱 Zhipu（程晔安）、商汤科技（蒋建平）、旷视 Megvii（黄哲威）、阿里巴巴（朱勇杰，算法工程师II）；
航天/遥感与能源：长光卫星（马逸，研究工程师）、中国南方电网（洪雨辰）、国家电网 China Electric Power（韩怡鸣）；
金融：银华基金量化研究员（陈浩然）；
高校与科研院所：西北工业大学教授（樊斌）、北京交通大学长聘副教授（常亚坤）、日本NII（梁锦秀、周矗）、北京智源（翁书晨）、南湖实验室（林小涵）；
海外深造：东京大学（韩金、高启尧）、UC Berkeley（顾超颖）、Rice、Columbia、UIUC、UT-Austin 等。

整体看，其产业网络呈现"成像硬件（脉冲相机/事件相机）+ 具身智能机器人（智平方）+ 通用视觉大厂（vivo/字节/DeepSeek等）"三条主线，其中 vivo 连续两年接收其博士毕业生，是较稳定的产业雇主关系。

六、重要奖项与学术兼职

论文奖项：

ICCP 2015 最佳论文亚军（Modulo Camera，第二最佳论文）；
ICCV 2015 最佳论文候选（当年1700选9，受邀扩展发表于 IJCV 专刊 Best Papers from ICCV 2015）；
CVPR 2024 最佳论文亚军（EventPS，第一作者于博涵、通讯作者施柏鑫）——北大首次获得该项荣誉；
CVPR 2026、3DV 2026 最佳论文候选（据北大计算机学院页面）。

个人荣誉：

日本大川研究助成奖（Okawa Research Grant，2021）；
中国电子学会科学技术奖青年科学家奖（2024年度，2025年4月颁奖）；
IJCV 2025年度杰出编委奖（Outstanding Editorial Board Member Award，2026年公布，为当年少数获奖者之一）；
北京大学"博雅青年学者"；北京市领军人才（高聚工程入选者）；国家级青年人才项目（北大官方页面表述为"国家级青年人才"，外界通常理解为基金委优青级别项目，具体项目名称与年份未见官方明示，此处审慎标注）；
斯坦福全球前2%顶尖科学家（2025年榜单，以智平方联合实验室主任身份被产业媒体报道）。

学术兼职：

IJCV 主编（Editor-in-Chief）：2026年8月 Springer Nature 宣布，首次聘期自2026年7月开始；为该刊创刊近40年首位来自中国大陆高校的主编，也是继汤晓鸥之后第二位华人主编；
TPAMI 编委（2023至今）、IJCV 编委（2020–2026）；
CVPR/ICCV/ECCV 领域主席、牵头领域主席（Lead Area Chair）；
APSIPA 杰出讲者（Distinguished Lecturer）；IEEE 高级会员、CCF 杰出会员、CSIG 高级会员；
北京大学前沿计算研究中心（CFCS）图灵班科研指导教师；第五届中国三维视觉大会（China 3DV）3DV 战略论坛主持人。

学术服务与专著：出版教材《计算摄像学：成像模型理论与深度学习实践》（机械工业出版社，2024，432页）；受邀在上海人工智能实验室"星河Talk"等平台作神经形态相机高速光度属性分析等前沿报告。

七、Connection圈层总结

施柏鑫的关系网络可概括为五个圈层：

核心圈——相机智能实验室：以"计算摄像学+新形态相机（事件/脉冲）"为旗帜，约30名专职成员规模的独立团队；毕业生已形成"国内高校教职（北交大、西工大）—日本NII—智源—头部企业"的多向扩散，且高产出学生（周矗、梁锦秀、于博涵）与导师保持长期合著。
校内圈——视频与视觉技术研究所/数字媒体所体系：与黄铁军（脉冲相机，约19篇合著）构成"类脑视觉传感器"双子星，辅以高文的院士级背书、王亦洲的事件视觉协作、陈宝权团队的逆渲染合作（MILO）、段凌宇的多媒体协作、张史航杭的具身智能协作；这一圈层使其天然嵌入北大"从像素到智能"的完整链条，并外延至CFCS图灵班的人才通道。
师承圈——日美新的国际学术家族：东京大学池内克史—松下康之路线（松下康之约29篇合著延续至今）+ MIT Media Lab 的 Ramesh Raskar（Camera Culture）+ 新加坡的 Sai-Kit Yeung、Alex C. Kot，加上 MSRA 出身的谭平、Rui Chen、Kwan-Yee K. Wong，构成其光度立体/偏振/反射成像的全球学术家族；国内则以北邮李思（约43篇合著）为最大跨校枢纽。
产业圈——从成像硬件到具身智能：早期以科技部重大专项的脉冲相机（高铁监测等场景）为产业出口；2025年起以北大—智平方具身智能联合实验室主任身份切入机器人赛道，叠加智源研究院、OpenBayes、vivo/字节/DeepSeek 等人才输送网络，完成"传感—算法—具身"的产业闭环布局。
学术权力圈：TPAMI/IJCV 双顶刊编委、IJCV 2025杰出编委奖，直至2026年出任 IJCV 主编（中国大陆第一人），标志其已从论文奖项层面的国际认可，进入计算机视觉学术共同体的治理核心。

总体而言，施柏鑫是典型的"国际训练—回国建制—产学研一体化"路径的青年学者：以计算摄像学这一细分领域为根据地，通过脉冲/事件相机承接国家级任务、通过具身智能联合实验室对接新兴产业、通过顶刊主编职务掌握学术话语权，其网络结构与北大视频与视觉技术国家工程研究中心"视觉国家队"的定位高度同构。仍需指出，其硕士导师与博士导师的官方记载均未公开明确，本报告基于合作署名关系的推断已作审慎标注。

PKU-VVT 施柏鑫 长聘副教授