中山大学 王州霞 教授
报告生成时间:2026年8月20日
个人主页:王州霞
所属团队:中山大学人机物智能融合实验室(HCP-Lab,Human Cyber Physical Intelligence Integration Lab)
一、学者基本信息
| 字段 | 信息 |
|---|---|
| 姓名 | 王州霞(Zhouxia Wang) |
| 职位 | 长聘轨道副教授(Tenure-Track Associate Professor)、博士生导师 |
| 所属单位 | 中山大学计算机学院 |
| 所属实验室 | 中山大学人机物智能融合实验室(HCP-Lab),X-Era Lab 研究主任 |
| 邮箱 | wangzhx85@mail.sysu.edu.cn / zhouzi1212@gmail.com |
| 个人主页 | https://wzhouxiff.github.io/ |
| Google Scholar | https://scholar.google.com.hk/citations?user=JWds_bQAAAAJ |
| GitHub | https://github.com/wzhouxiff |
| 人才称号 | 国家级青年人才 |
| 研究方向 | 可控图像与视频生成、图像与视频修复、具身智能与主动感知、视觉理解 |
| 论文引用 | 谷歌学术累计引用超 2000 次 |
| 发明专利 | 11 项 |
| 代表性开源项目 | MotionCtrl、ObjCtrl-2.5D、RestoreFormer/RestoreFormer++ |
二、教育背景与职业履历
王州霞的学术生涯起步于中山大学,并在此奠定了扎实的计算机视觉研究基础。她本科和硕士均就读于中山大学,在林倞教授(现IEEE/IAPR Fellow、国家杰青获得者、HCP-Lab创始人)的指导下完成学业。这一阶段,她已开始在高层次视觉理解方向崭露头角,以一作身份在ICCV 2017和AAAI 2018等顶级会议上发表论文。
硕士毕业后,王州霞前往香港大学 MMLab@HKU 攻读博士学位,师从罗平教授(Ping Luo)和王文平教授(Wenping Wang,现任教于德州农工大学)。在港大期间,她的研究重心聚焦于盲人脸修复(Blind Face Restoration),提出了RestoreFormer系列方法,利用未降质键值对(undegraded key-value pairs)实现高质量的盲人脸修复,相关工作发表于CVPR 2022和TPAMI 2023,成为该领域的标志性工作。她同时在强化学习辅助图像增强方向有所建树,提出了基于强化学习的曝光包围选择方法(CVPR 2020)。
博士毕业后,王州霞赴新加坡南洋理工大学 MMLab@NTU 从事博士后研究,合作导师为赖钧诚教授(Chen Change Loy,Tan Lip-Bu人工智能讲席教授、MMLab@NTU主任、CVPR 2026程序委员会共同主席)。在NTU期间,她的研究方向拓展至可控视频生成和图像风格化生成,并开始探索基于扩散模型的视频运动控制和噪声空间域适应等前沿课题。这段经历为她后来在视频生成领域的突破性成果奠定了重要基础。
随后,王州霞回国加入中山大学计算机学院,担任长聘轨道副教授、博士生导师,并同时加入HCP-Lab成为核心成员,以及X-Era Lab的研究主任。她入选国家级青年人才计划,研究方向涵盖可控图像与视频生成、图像与视频修复、具身智能与主动感知、视觉理解等多个方向。研究成果发表于TPAMI、IJCV、TIP、CVPR、ICCV、SIGGRAPH、ICLR等国际顶级期刊和会议,累计引用超2000次,拥有发明专利11项。她主导开发的MotionCtrl、ObjCtrl-2.5D、RestoreFormer/++等开源项目受到社区广泛关注,其中MotionCtrl在GitHub上获得了大量Star,并被腾讯ARC实验室官方推广。
三、学生培养情况
作为博士生导师和课题组负责人,王州霞积极招收和培养博士后、博士生、研究生及优秀本科生。根据她的近年论文发表记录,以下是在她指导下或密切合作的学生(基于论文署名和项目归属推断):
1. 白永杰(Yongjie Bai)(博士生,指导学生)
白永杰是王州霞指导的博士生,在具身智能方向表现突出。二人在CVPR 2026上以共同第一作者身份发表了论文"Learning to See and Act: Task-Aware Virtual View Exploration for Robotic Manipulation",研究了面向机器人操控的任务感知虚拟视角探索问题,该工作同时提供了开源数据集和代码。白永杰的研究方向涵盖具身视觉感知与机器人操控,是王州霞课题组在具身智能领域的代表性学生。
2. 赵继新(Jixin Zhao)(研究生,指导学生)
赵继新是王州霞指导的研究生,主攻图像编辑与目标移除方向。他在CVPR 2026上以第一作者身份发表了论文"ObjectClear: Precise Object and Effect Removal with Adaptive Target-Aware Attention",王州霞为共同通讯/指导教师。该工作提出了基于自适应目标感知注意力机制的精确物体及效果移除方法,展示了课题组在图像编辑领域的持续深耕。
3. 王一凯(Yikai Wang)(合作研究生/访问学生,MMLab@NTU)
王一凯来自MMLab@NTU(赖钧诚教授组),与王州霞在ICLR 2026上合作发表了论文"Next Visual Granularity Generation"。王州霞在该工作中担任共同指导角色,体现了她与博士后合作导师赖钧诚教授之间持续的研究合作关系,以及对跨机构学生的联合培养。
4. 袁子阳(Ziyang Yuan)(合作学生,北京大学/NTU)
袁子阳作为合作者参与了王州霞多项重要工作,包括MotionCtrl(SIGGRAPH 2024)和Image Conductor(AAAI 2025),署名单位显示其曾隶属南洋理工大学。他的研究方向涵盖视频生成的运动控制和精确控制,与王州霞在视频生成领域形成了密切的合作关系。Image Conductor工作同时涉及北京大学深圳研究生院和腾讯ARC实验室的合作。
5. 李耀威(Yaowei Li)(合作博士生,北京大学)
李耀威是北京大学深圳研究生院邹月娴教授课题组的博士生,与王州霞在AAAI 2025上合作发表了论文"Image Conductor: Precision Control for Interactive Video Synthesis"。该工作由王州霞与腾讯ARC团队合作完成,李耀威为第一作者。这一合作体现了王州霞在产学研合作框架下对学生联合培养的重视。
6. 邱浩男(Haonan Qiu)(合作者/学生关联,MMLab@NTU)
邱浩男来自MMLab@NTU,与王州霞在IJCV 2026上合作发表了论文"FreeTraj: Tuning-Free Trajectory Control in Video Diffusion Models"。该工作提出了无需训练的视频扩散模型轨迹控制方法,王州霞作为核心合作者参与指导。邱浩男的研究方向为视频生成与轨迹控制,体现了王州霞与NTU团队的持续学术交流。
7. 兰钰诗(Yushi Lan)(合作研究生,MMLab@NTU)
兰钰诗是MMLab@NTU的研究生,与王州霞在IJCV 2026上合作发表了论文"ObjCtrl-2.5D: Training-free Object Control with Camera Poses",这是王州霞的代表性工作之一。该研究提出了基于相机位姿的无需训练物体控制方法,在开源社区获得了广泛关注。
8. 周尚晨(Shangchen Zhou)(合作者,MMLab@NTU)
周尚晨来自MMLab@NTU,参与了ObjCtrl-2.5D(IJCV 2026)和ObjectClear(CVPR 2026)等多项与王州霞的合作研究。他的研究方向涵盖图像修复与视频生成,是王州霞与赖钧诚教授团队之间学术合作的桥梁人物之一。
四、学术合作网络
4.1 核心学术合作者
王州霞的学术合作网络以"三导师 + 产业伙伴"为主轴,形成了多层次的学术生态系统。
(1)林倞教授(Liang Lin)—— 本硕导师 / HCP-Lab创始人
林倞教授是王州霞的本硕导师,现任中山大学HCP-Lab创始人兼负责人、国家杰青获得者、IEEE/IAPR/IET Fellow。他曾任商汤科技研究院执行院长/首席研发总监,论文引用超4万次,H指数>103。王州霞的几乎所有中山大学时期论文均有林倞的参与或指导,包括CVPR 2026的"Learning to See and Act"和ICCV 2017的"Multi-label Image Recognition"等。林倞与王州霞之间不仅是师承关系,也是HCP-Lab的核心团队合作关系。
(2)罗平教授(Ping Luo)—— 博士导师
罗平教授是王州霞在香港大学MMLab@HKU的博士导师,现为香港大学计算机科学系教授。王州霞的博士期间核心工作——RestoreFormer/RestoreFormer++系列(CVPR 2022、TPAMI 2023、TIP 2024)以及StyleAdapter(IJCV 2024)等均有罗平教授的共同指导。两人的合作贯穿了从人脸修复到图像风格化生成再到视频生成等多个研究方向。
(3)赖钧诚教授(Chen Change Loy)—— 博士后合作导师
赖钧诚教授现任南洋理工大学Tan Lip-Bu人工智能讲席教授、MMLab@NTU主任,是计算机视觉领域享有盛誉的学者。他担任CVPR 2026程序委员会共同主席、IJCV和TPAMI等顶级期刊副主编。王州霞在NTU博后期间与赖教授合作密切,合作成果包括ObjCtrl-2.5D(IJCV 2026)、Next Visual Granularity Generation(ICLR 2026)、Denoising as Adaptation(ICLR 2025)和FreeTraj(IJCV 2026)等。这段合作关系在王州霞回国后仍在持续,形成了SYSU-NTU的跨机构合作通道。
(4)陈添水副教授(Tianshui Chen)—— 同门 / 长期合作者
陈添水现任广东工业大学信息工程学院副教授(青年百人计划),是中山大学HCP-Lab出身的核心合作者。他与王州霞同为林倞教授指导的学生(陈添水2018年博士毕业于中山大学),二人在IJCAI 2018、AAAI 2018、ICCV 2017等早期论文中频繁合作,研究主题涵盖知识图谱推理、多标签图像识别等。陈添水曾于2019-2021年在暗物智能科技担任研究总监,Google Scholar引用1900+,H指数19。两人的合作关系延续了十余年。
4.2 跨机构合作网络
王州霞的合作网络覆盖了粤港澳大湾区、新加坡和北美等多个地区的学术机构:
粤港澳大湾区合作网络: - 中山大学HCP-Lab:作为核心成员,与林倞教授、李冠彬教授(计算机学院副院长、国家优青)、刘阳副教授(具身智能方向)、梁小丹教授(阿里巴巴青橙奖得主)等保持紧密的实验室内部协作。HCP-Lab目前包含7名国家级青年人才,累计发表CCF-A类论文1000余篇。 - 广东工业大学:通过陈添水副教授建立了跨校合作通道。 - 北京大学深圳研究生院:与邹月娴教授课题组(李耀威等学生)通过Image Conductor等项目维持合作。
国际学术网络: - 香港大学MMLab@HKU:博士母校,与罗平教授保持长期合作关系。 - 南洋理工大学MMLab@NTU:博士后单位,与赖钧诚教授、刘子威教授(Ziwei Liu)等保持密切合作。MMLab@NTU是王州霞当前最重要的国际合作节点,多名合作论文的学生(兰钰诗、周尚晨、邱浩男、王一凯)均来自该实验室。 - 德州农工大学:通过博士联合导师王文平教授(Wenping Wang)保持学术联系。
五、业界合作关系深度分析
5.1 与腾讯ARC实验室的深度合作
王州霞在产业界最重要的合作伙伴是腾讯ARC实验室(Tencent ARC Lab,Applied Research Center)。这一合作关系贯穿了她从博士后期到独立任教后的多个代表性工作:
(1)MotionCtrl(SIGGRAPH 2024)
MotionCtrl是王州霞与腾讯ARC团队合作的标志性成果,提出了统一且灵活的视频生成运动控制器,能够独立控制相机运动和物体运动。论文合作者包括腾讯ARC的王心涛(Xintao Wang)、叶良斌(Liangbin Xie)、齐仲刚(Zhongang Qi)和单瀛(Ying Shan),以及商汤科技的夏梦涵(Menghan Xia)和港大的罗平教授。该项目的代码托管在TencentARC GitHub组织下(https://github.com/TencentARC/MotionCtrl),并提供了基于Stable Video Diffusion、VideoCrafter和AnimateDiff三个平台的部署方案,在HuggingFace上部署了在线Demo。这一合作模式体现了"学术界提出创意 + 工业界提供算力和工程支持"的典型产学研协同范式。
(2)StyleAdapter(IJCV 2024)与TIP 2024工作
StyleAdapter和"Analysis and Benchmarking of Extending Blind Face Image Restoration to Videos"两篇论文同样由王州霞与腾讯ARC团队合作完成,合作者包括王心涛、叶良斌等核心成员。这些工作延续了从图像风格化生成到视频人脸修复的研究脉络。
(3)Image Conductor(AAAI 2025)
Image Conductor继续深化了与腾讯ARC的合作,由北京大学深圳研究生院李耀威(第一作者)和王州霞共同主导,腾讯ARC的王心涛、张兆阳、叶良斌、单瀛参与。该工作提出了精确控制相机转场和物体运动的视频合成方法。
腾讯ARC合作网络的意义: 腾讯ARC实验室在视频生成与控制领域拥有世界一流的研究能力(累计发表顶会论文160+篇),其开源项目如VideoCrafter、DepthCrafter、ViewCrafter等在社区有广泛影响力。王州霞与ARC团队的合作使她的研究成果能够快速转化为可部署的工业级工具,同时也为ARC团队提供了来自学术界的创新思路。值得注意的是,王州霞的多篇论文中腾讯ARC团队成员(特别是王心涛Xintao Wang和单瀛Ying Shan)反复出现,形成了稳定的"学术-工业"双核心合作模式。
5.2 其他产业合作与影响
(1)与商汤科技(SenseTime)的关联
王州霞的导师林倞教授曾担任商汤科技研究院执行院长/首席研发总监,这一背景使HCP-Lab与商汤科技之间存在天然的产业联系。在MotionCtrl(SIGGRAPH 2024)中,商汤科技的夏梦涵(Menghan Xia)作为合作者参与,体现了这一产业网络在具体项目中的体现。此外,HCP-Lab整体与知名IT及人工智能企业(如字节跳动、华为、广州视源科技等)开展广泛合作。
(2)开源社区的产业影响力
王州霞主导的多个开源项目在产业界产生了实际影响: - MotionCtrl:在TencentARC官方GitHub组织下开源,获得社区大量关注,已被部署在HuggingFace Spaces上供公众使用。 - RestoreFormer/RestoreFormer++:在GitHub上开源,提供了HuggingFace在线Demo,被广泛用于人脸修复相关应用。 - ObjCtrl-2.5D:在个人GitHub账号下开源,同时提供了HuggingFace Demo。 这些项目不仅在学术界被广泛引用,也被工业界开发者用于实际产品原型开发。
(3)HCP-Lab的产业化生态
作为HCP-Lab核心成员,王州霞受益于实验室整体的产业化布局。HCP-Lab围绕"人工智能前沿技术与产业化"布局研究方向,与字节跳动、华为、广州视源科技等上市公司开展广泛合作,累计获得科研经费超1亿元,并积极推动多家科创企业的孵化与发展。实验室还参与了PhyAgentOS(自进化物理智能体开源操作系统)等产学研项目的开发。
六、重要奖项与学术兼职
| 奖项/兼职名称 | 类别 | 时间 |
|---|---|---|
| 国家级青年人才 | 人才计划 | — |
| HCP-Lab核心成员(7名国家级青年人才之一) | 团队荣誉 | — |
| SIGGRAPH 2024 Conference Proceedings(MotionCtrl) | 顶级会议论文 | 2024 |
| CVPR 2026录用论文(Learning to See and Act、ObjectClear) | 顶级会议论文 | 2026 |
| ICLR 2026录用论文(Next Visual Granularity Generation) | 顶级会议论文 | 2026 |
| IJCV 2026录用论文(ObjCtrl-2.5D、FreeTraj) | 顶级期刊论文 | 2026 |
| ICLR 2025录用论文(Denoising as Adaptation) | 顶级会议论文 | 2025 |
| AAAI 2025录用论文(Image Conductor) | 顶级会议论文 | 2025 |
| HCP-Lab广东省科技进步一等奖(团队成员) | 科技奖励 | 2024 |
| HCP-Lab CVPR 2024 Best Paper Candidate(团队,两篇) | 最佳论文候选 | 2024 |
| 11项发明专利 | 知识产权 | — |
七、Connection圈层总结
王州霞的学术关系网络呈现出清晰的四层结构,每一层都具有独特的定位和功能。
第一圈层:核心导师与学术共同体
王州霞学术网络的核心由三位导师构成:本硕导师林倞教授(中山大学,HCP-Lab创始人,IEEE/IAPR Fellow)、博士导师罗平教授(香港大学MMLab@HKU)和博士后合作导师赖钧诚教授(南洋理工大学MMLab@NTU,CVPR 2026程序委员会共同主席)。这三位导师分别代表了她学术生涯的三个阶段,不仅塑造了她的研究方向(从视觉理解到人脸修复再到视频生成),还为她构建了跨越中山大学-港大-NTU的三校学术通道。值得注意的是,这三位导师均为计算机视觉领域具有重要影响力的学者,为他们之间的合作提供了坚实的学术信誉基础。
第二圈层:同门与长期合作者
第二圈层以同门和长期合作者为主。陈添水副教授(广东工业大学)作为林倞教授指导的博士、王州霞的同门师兄弟,与她保持了十余年的合作关系。腾讯ARC团队的王心涛、叶良斌、单瀛等则构成了她最重要的产业界合作网络,合作覆盖了MotionCtrl、StyleAdapter、Image Conductor等多项代表性工作。此外,博士同期成员如Jiawei Zhang(RestoreFormer系列合作者)、Runjian Chen等也在她早期研究中发挥了重要作用。HCP-Lab内部的李冠彬教授、刘阳副教授等同事则为她在中山大学的教学和科研提供了日常协作支持。
第三圈层:跨机构学生网络与NTU合作通道
第三圈层是王州霞当前的学术增量来源。回到中山大学后,她积极招收博士生和研究生(如白永杰、赵继新等),同时在具身智能、图像编辑等新方向上开拓。与NTU MMLab的合作通道尤为活跃:通过赖钧诚教授的团队,她与多名NTU研究生(兰钰诗、周尚晨、邱浩男、王一凯)保持了密切的合作关系,形成了"SYSU为基地 + NTU为外延"的双中心研究模式。此外,通过与北京大学深圳研究生院的李耀威等学生的合作,她还建立了与粤港澳大湾区内其他高校的学生联合培养通道。
第四圈层:产业生态与开源影响力
第四圈层是王州霞的产业生态网络,以腾讯ARC实验室为核心节点。她与ARC团队的合作不是简单的"接受企业资助"模式,而是形成了对等的"学术创意 + 工程实现"协同关系。MotionCtrl项目托管在TencentARC GitHub组织、在HuggingFace部署Demo就是这种对等合作关系的典型体现。通过HCP-Lab的整体产业化布局,她还间接连接了商汤科技(通过导师林倞的商汤背景)、字节跳动、华为等企业资源。她的多个开源项目(RestoreFormer/++累计Star数千、MotionCtrl广泛部署)使其在开源社区建立了独立的产业影响力,这为未来将学术成果转化为实际产品或创业项目奠定了基础。
总结而言,王州霞的学术网络具有三个显著特征:一是"三校三导师"的学术根基深厚,覆盖了中国南方和新加坡两大学术重镇;二是产学研合作紧密且对等,与腾讯ARC形成的合作模式在青年学者中具有示范意义;三是正处于学术影响力的快速上升期——从2024年SIGGRAPH到2026年CVPR/ICLR/IJCV的连续突破,加上国家级青年人才称号的加持,她的合作网络正在从"依托导师"向"自主主导"转变,未来有望成为视频生成与具身智能交叉领域的重要学术领袖。