杭州电子科技大学 余宙 教授(浙大博士校友)
报告生成时间:2026年8月25日
个人主页:余宙
所属团队:浙江大学 吴飞团队(跨媒体智能/多模态)· 人工智能研究所(浙大谱系外围/校友)
一、学者基本信息
| 项目 | 内容 |
|---|---|
| 姓名 | 余宙(Zhou Yu) |
| 现任职务 | 杭州电子科技大学教授、计算机学院副院长(经杭电教师主页与多所高校官方讲座通告核实) |
| 所属单位 | 杭州电子科技大学计算机学院;媒体智能实验室(MIL/MILVLG) |
| 重要身份澄清 | 余宙并非浙江大学在职教师。其与浙江大学的关系为:2006年考入浙江大学计算机学院数字媒体专业,2010年获数字媒体技术学士学位,2015年获浙江大学计算机科学与技术博士学位(本科直博),属浙大跨媒体智能学派的博士校友与谱系外围成员(据杭电MIL实验室主页及浙江省自然科学基金官方报道核实) |
| 博士导师 | (待核实。其博士期间研究方向为跨媒体/视觉问答,与浙大庄越挺-吴飞跨媒体团队高度重合,但导师姓名未见于任何一手来源;"王东辉学生"的说法未检索到任何证据,不予采信) |
| 人才称号 | 国家级青年人才(国家优秀青年科学基金项目获得者,2025-2027"视觉问答"方向,据浙江省自然科学基金官方报道);中国科协第五届"青年人才托举工程";首届浙江省高校领军人才培养计划(青年优秀人才) |
| 研究方向 | 多模态深度学习与推理、多模态预训练与大模型、视觉问答、跨媒体检索、受限资源轻量化多模态学习 |
| 学术成果 | 高水平论文60-70余篇(T-PAMI、T-NNLS、T-MM、CVPR、ICCV、ACM MM等),谷歌学术引用5000-6000余次(不同来源口径略有差异) |
| 学术兼职 | 浙江省计算机学会副秘书长;中国计算机学会(CCF)多媒体专委会委员;浙江省计算学会数字媒体专委会委员;曾兼任教育部"复杂系统建模与仿真"实验室副主任(据杭电官方师恩难忘专题);IEEE TPAMI/TIP/TMM/TCSVT及AAAI/IJCAI/ACM MM审稿人 |
| 联系方式 | yu@hdu.edu.cn(第1教学楼512室,据杭电教师主页) |
二、教育背景与职业履历
余宙2006年考入浙江大学计算机学院数字媒体专业,自此进入跨媒体研究领域。他本科毕业后直接攻博,2015年在浙江大学获得计算机科学与技术专业博士学位,博士阶段的研究即聚焦于视觉问答与跨媒体数据的统一建模。需要强调的是,其浙大博士阶段(2010-2015)正值庄越挺执掌计算机学院、吴飞崛起为跨媒体计算中坚的时期,其研究方向(视觉问答、跨媒体检索)与浙大"跨媒体计算学派"一脉相承;其代表性合作论文(如CVPR 2023的ANetQA)与吴飞、赵洲、任奎等浙大教师联合署名,参与了"跨媒体因果推断理论与方法"(科技创新2030重大项目课题,2019-2021,吴飞团队牵头方向)与"基于大规模跨媒体知识网络的复杂视频问答方法研究"(国家自然科学基金重点项目,2019-2023)等课题,可见其学术根系深扎浙大跨媒体智能谱系。但其在浙大的直接指导教师至今未能从公开一手来源中核实。
2015年至2016年,余宙入职阿里巴巴集团搜索事业部任资深算法工程师,积累了搜索排序与工业级算法落地经验。2016年他放弃企业职业通道,重返学术界加盟杭州电子科技大学计算机学院:2016-2018年任讲师,2019-2022年晋升副教授,2023年起任教授(据杭电教师主页工作经历)。在杭电,他与长期合作者俞俊(Jun Yu)教授共同建设媒体智能实验室(MIL,开源组织MILVLG),并逐渐成长为实验室学术带头人之一;行政方面先后担任教育部"复杂系统建模与仿真"实验室副主任、杭州电子科技大学计算机学院副院长,同时作为浙江省计算机学会副秘书长活跃于省内学术组织工作。2018年起他先后主持国家自然科学基金青年、面上项目,2022年获浙江省杰出青年科学基金("可信跨媒体分析推理"),2024-2025年获批国家优秀青年科学基金项目(视觉问答方向),完成从青年学者到国家级青年人才的跃升。2025年前后其研究重心转向受限资源下的轻量化多模态大模型(代表作为可在移动端运行的Imp模型),并在杭电牵头开设DeepSeek通识课,推动大模型技术教学普及。
三、学生培养情况
余宙自2016年在杭电独立指导研究生以来,通过MIL实验室(与俞俊教授共建的"媒体智能导学团队",教师11人)培养了多名硕士、博士,学生去向覆盖高校、阿里巴巴达摩院、字节跳动、华为等。以下据MIL实验室主页学生名录及公开报道整理:
1. 余婷(杭州师范大学教师,直接指导博士生)
余宙指导的首批博士生(2017级),与俞俊教授共同指导,毕业后入职杭州师范大学任教,是其学术传人中进入高校教职的代表(据MIL实验室主页学生名录,已核实)。
2. 崔宇豪(阿里巴巴达摩院算法工程师,直接指导硕士生)
2018级硕士毕业生,现为阿里达摩院算法工程师。其作为第一作者、余宙为共同指导作者的ROSITA(ACM MM 2021)是首个同时引入模态内与模态间知识增强的多模态预训练方法,亦是其早期代表成果(据MIL实验室主页,已核实)。
3. 邵镇炜(MIL实验室博士研究生,直接指导硕士生转博)
2021级硕士推免生(后转博),"进行性脊肌萎缩症"患者、2018年中国大学生自强之星。其第一作者论文Prophet(CVPR 2023,余宙团队与合肥工业大学Meng Wang团队合作)以答案启发式提示大语言模型解决知识型视觉问答,在OK-VQA上超越DeepMind的Flamingo,被媒体广泛报道(据杭电官网新闻及百度百家号报道,已核实)。
4. 郑力豪(博士研究生,直接指导硕士生转博)
2022级硕士生转博,ANetQA(CVPR 2023,未修剪视频细粒度组合推理基准数据集)的合作者之一,参与团队视频多模态推理方向研究(据MIL实验室主页学生名录,已核实)。
5. 欧阳雪城(硕士研究生,直接指导)
2022级硕士生,移动端多模态大模型Imp(2024,性能超过LLaVA 7B/13B且可在手机运行)的作者之一,代表团队向轻量化多模态大模型方向的延伸(据MIL实验室主页代表性工作,已核实)。
6. 项晨钞(阿里巴巴算法工程师,直接指导硕士生,2016级)
毕业后入职阿里巴巴,在校期间与俞俊、余宙共同持有"基于多模态低秩双线性池化的图像内容问答方法"(MFB)发明专利,该专利对应的技术即VQA Challenge 2017/2018世界亚军方案(据MIL实验室主页及专利公开信息,已核实)。
此外,团队培养的其他学生包括李敬(硕士,拼多多)、宋怡君(硕士,网易)、汪亮(硕士,华为)、韩男佳/李娉(硕士,字节跳动)、罗同桉(硕士,华为)等,另有金子添、李立权等中俄联合培养硕士,形成了稳定的"高校教职+头部企业算法岗"双通道输出格局。
四、学术合作网络
4.1 实验室内部合作
余宙学术网络的核心是杭电MIL媒体智能实验室:他与俞俊教授构成"双核"结构,二人自余宙博士阶段起即持续联合署名(MFB/MFH、MCAN、ROSITA、Prophet等),俞俊通常任通讯作者,余宙任第一或共同通讯作者。该团队即杭电官方报道的"媒体智能导学团队"(教师11人,含教授3人),多次获国际学术竞赛冠亚军,并获浙江省自然科学一等奖(余宙排名第二)。实验室开源组织MILVLG(GitHub)维护OpenVQA、ROSITA、Prophet、Imp等项目,在国际多模态社区具有影响力。
4.2 跨机构合作
与浙大的持续合作是其网络的关键支点:ANetQA(CVPR 2023)联合署名者包括浙江大学赵洲、吴飞、任奎,且余宙以课题骨干参与科技创新2030"跨媒体因果推断理论与方法"重大项目课题及NSFC重点项目"基于大规模跨媒体知识网络的复杂视频问答方法研究"(2019-2023),显示其始终嵌于浙大跨媒体智能合作网络之中。此外,他与合肥工业大学Meng Wang(王梦)团队长期合作(Prophet、ROSITA),与河南大学(原郑州大学团队背景)徐明亮合作视觉问答效率方向,与华为Qi Tian(田奇)多次联合署名。
4.3 国际合作
余宙与国际学者的合作集中于视觉问答与深度学习理论一线:与悉尼大学/JD Explore Academy的陶大程长期合作(MCAN、MFH、多模态神经架构搜索均联合署名);与美国北卡罗来纳大学夏洛特分校范建平在图像问答与视频推理方向持续合作十余年(ANetQA、Bilaterally Slimmable Transformer等)。其学生邵镇炜与DeepMind的Flamingo模型形成直接学术对话,体现其团队工作在国际基准上的可见度。
五、业界合作关系深度分析
5.1 产业合作
余宙是杭电教师中产学结合较深的代表:其一,2015-2016年曾任阿里巴巴搜索事业部资深算法工程师,与阿里系保持人才与技术双通道联系(多名毕业生入职阿里、达摩院);其二,在国家重点研发计划支持下,与百度、人民日报合作研发AI辅助新闻写稿系统并已投入实际应用("基于新闻报道场景的AI辅助写稿机器人系统研发",2021-2023);其三,与理想汽车合作推动跨媒体智能技术在智能座舱场景落地;其四,其VQA技术成果被多家知名企业多模态大模型借鉴(据浙江省自然科学基金官方报道)。MIL团队整体还与电科集团、华为、浙江省人民医院等建立合作。
5.2 创业孵化与开源生态
余宙团队的开源生态是其最重要的"准创业"资产:MILVLG组织开源的OpenVQA(模块化VQA框架)是VQA社区广泛使用的基线代码库之一;ROSITA多模态预训练代码、Prophet(为GPT-3"插上眼睛")、Imp(移动端多模态大模型,性能超LLaVA且可直接在手机运行)等项目形成从研究到端侧部署的完整开源链条。Imp所代表的"受限资源轻量化多模态大模型"路线,是高校在算力约束下与企业大模型差异化竞争的典型策略,余宙2026年初的公开学术报告(宿州学院等邀请)即以该路线为主题。
六、重要奖项与学术兼职
| 奖项/荣誉 | 年份 | 备注 |
|---|---|---|
| VQA Challenge世界冠军 | 2019 | MCAN方案,CVPR 2019 |
| VQA Challenge世界亚军 | 2017、2018 | MFB/MFH方案 |
| 浙江省自然科学一等奖 | 2020年度 | 排名第二(2/4) |
| ACM新星奖(杭州) | 2021 | |
| 中国科协"青年人才托举工程" | 第五届 | |
| 浙江省高校领军人才培养计划 | 首届 | 青年优秀人才 |
| 浙江省杰出青年科学基金 | 2022 | 可信跨媒体分析推理 |
| 国家优秀青年科学基金 | 2025-2027 | 视觉问答方向,国家级青年人才 |
| 兼职 | 类型 |
|---|---|
| 浙江省计算机学会副秘书长 | 省级学会 |
| CCF多媒体专委会委员 | 全国性专委 |
| 浙江省计算学会数字媒体专委会委员 | 省级专委 |
| 教育部"复杂系统建模与仿真"实验室副主任 | 省部级平台(据杭电官方专题,任期待核实) |
| IEEE TPAMI/TIP/TMM/TCSVT、AAAI/IJCAI/ACM MM审稿人 | 期刊/会议审稿 |
七、Connection圈层总结
第一圈层(学术根系):余宙的根基在浙江大学跨媒体智能学派。2006-2015年他在浙大完成本科直博,研究主题(视觉问答、跨媒体统一建模)直接承接庄越挺-吴飞团队的跨媒体计算传统;此后持续与吴飞、赵洲、任奎联合署名并参与科技创新2030课题,是浙大跨媒体谱系向省属高校辐射的典型节点。需再次强调:其博士导师身份(是否为吴飞、庄越挺或其他人,以及"王东辉学生"之说)均无一手证据,有待学位论文等原始资料证实。
第二圈层(学术共同体):以杭电MIL实验室为运营核心,与俞俊构成双带头人结构;向外连接合肥工业大学Meng Wang、UNC Charlotte的Jianping Fan、陶大程、华为田奇、徐明亮等国内外合作者,形成覆盖"视觉问答-多模态预训练-轻量化大模型"的完整合作网络。
第三圈层(产业与学生网络):通过阿里巴巴(个人履历+学生输出)、百度与人民日报(AI写稿系统)、理想汽车(智能座舱)构建产业落地带;通过MILVLG开源社区(OpenVQA、Prophet、Imp)形成国际可见的技术影响力;其学生网络已覆盖杭师大等高校教职与阿里达摩院、字节、华为、拼多多等企业算法岗。
总括:余宙的案例展示了浙大跨媒体智能学派"血缘外溢"的典型路径——以浙大博士训练为学术底色,经企业历练后扎根省属头部高校,十年内完成从讲师到教授、再到国家优青和学院副院长的跃升,并通过持续的跨校合作(尤其与吴飞/赵洲团队)保持与母体学派的强连接。对学术网络调研而言,他是连接浙大跨媒体智能学派与杭州本地产业生态(阿里、理想、媒体行业)的重要桥梁型人物;其"受限资源轻量化多模态大模型"路线亦为观察高校在算力约束时代差异化生存策略提供了样本。