近日,陈斌老师课题组邱怡翔同学完成的《基于生成模型先验的模型反演攻击研究》和俞文博同学完成的《跨模态的可编辑语义通信算法研究》均荣获2024届哈尔滨工业大学(深圳)校级优秀本科毕业设计(论文)。本年度深圳校区计算机学院共评选出17篇优秀本科毕业设计(论文),获奖率仅3%。
邱怡翔同学的毕业论文聚焦于AI安全领域的隐私安全问题,主要研究一类旨在从深度学习模型的输出中恢复输入数据或其特征的模型反演攻击。针对当前模型反演领域缺少基准测试的问题,论文构建了一个集成了多种模型反演攻击算法与防御策略的开源工具库,为研究者提供了便利的评估平台,促进了算法性能的横向比较。针对模型反演领域对生成先验潜力挖掘不足、相异数据集分布下反演困难的关键挑战,论文提出了一种基于中间层特征优化的生成式模型反演攻击,创新性地将生成器的网络拆分成若干中间层,对中间层特征向量进行递进式优化,而不仅仅是隐向量的优化,并通过引入约束项确保特征的真实性和优化质量。在6种数据集和4种目标模型上开展的实验表明,该方法的性能超越了现有最优的模型反演攻击算法,特别是在高难度的相异数据集分布场景下展现出显著优势。
邱怡翔同学论文的第一部分成果(第2章)在扩展了更多的实验结果后,已经以第一作者身份投稿至机器学习领域顶级会议NeurIPS 2024 Datasets and Benchmarks Track(中国计算机学会推荐A类学术会议,清华大学计算机学科群推荐A类学术会议);论文的第二部分成果(第3章至第4章)已经以第一作者身份被计算机视觉领域顶级会议ECCV 2024 Main Track(中国计算机学会推荐B类学术会议,清华大学计算机学科群推荐A类学术会议)录用,这也是哈工大深圳校区首次有本科生以第一作者身份在该顶级会议发表论文。
俞文博同学的毕业论文对语义通信的新型架构创新性地进行了探索,主要研究对话交互式场景下的通信与编辑问题。针对受限带宽资源、受限存储资源、编辑效果与保真度兼顾的关键挑战,论文讨论了不同的跨模态数据导向型通信模式,并由严密的理论推导指出,这些分离式地完成通信与编辑的模式增加了数据后续处理的步骤,更容易造成语义互信息的丢失,并提出了基于预训练生成模型反演的语义编码和基于迭代式属性匹配的编辑-信道联合编码,联合优化编辑与通信,减少数据处理的环节。针对信道噪声干扰、动态通信环境的关键挑战,论文进一步指出应当高效地针对动态变化的信道条件微调少量模型参数,提出了基于模型参数微调的信噪比感知信道编解码,引入了两个较为轻量的可训练模块,在微调阶段针对各个信噪比调整可训练模块的参数,冻结剩余的网络参数,在捕获新信噪比下数据分布规律的同时,避免其余先验知识由于微调而被遗忘。论文所提出的方法在4个公开数据集和9种信噪比下优于已有的方法,具有高效性和鲁棒性。
俞文博同学论文的部分成果(第3章)已经以第一作者身份被网络通信领域经典会议 VTC 2024 Spring Main Track 录用(哈尔滨工业大学高水平国际学术会议目录A类会议 , 中国电子学会推荐II类学术会议),并在大会上作口头报告;论文的完整成果(第1章至第4章) 将 投稿至网络通信领域顶级期刊IEEE Transactions on Communications(中国计算机学会推荐B类 学术 期刊 ,清华大学计算机学科群推荐A类学术期刊 )。
获奖者简介:
邱怡翔,深圳校区计算机学院2024届本科毕业生,学业上表现突出,专业成绩排名4/528,曾获得过国家奖学金、方滨兴奖学金、学业一等奖学金、学业二等奖学金、赛维时代进步之星奖学金、优秀学生、优秀共青团员、校级优秀毕业生、校级优秀毕业设计(论文)等荣誉;科创竞赛能力较强,曾获全国大学生数学建模竞赛省级一等奖、全国大学生数学竞赛省级一等奖、龙芯杯全国大学生计算机系统能力大赛国家级三等奖等奖项;积极参与社会实践与志愿活动,志愿服务时长累计超过60小时;本科毕业去向为清华大学深圳国际研究生院攻读计算机技术专业硕士研究生(保送,导师:夏树涛教授)。
俞文博,深圳校区计算机学院2024届本科毕业生,学业成绩优异,专业综合排名前5%(含优秀加分),曾获学业一等奖学金、学业二等奖学金、赛维时代计算之星奖学金、华为智能基座奖学金、优秀学生干部、优秀共青团员、校级优秀毕业生、校级优秀毕业设计(论文)等荣誉;科创竞赛表现突出,曾获全国大学生操作系统竞赛国家级一等奖、全国大学生数学建模竞赛国家级二等奖/省级一等奖、龙芯杯全国大学生计算机系统能力大赛国家级三等奖、蓝桥杯程序设计竞赛国家级三等奖/省级一等奖、全国大学生数学竞赛省级一等奖等奖项;为人热心,担任班级学习委员,积极参与各类志愿服务;本科毕业去向为清华大学深圳国际研究生院攻读计算机技术专业硕士研究生(保送,导师:夏树涛教授)。
陈斌老师 简介:
陈斌,博士,计算机科学与技术学院副教授,博士生导师,哈工大”青年拔尖人才计划”,主要从事信息论与编码理论、多媒体压缩与安全的教学与科研工作。在人工智能/信息论/通信顶级期刊如IEEE Transactions on Patttern Analysis and Machine Intelligence (TPAMI), IEEE Transactions on Information Theory (TIT), International Journal of Computer Vision (IJCV), IEEE Transactions on Communications (TCOM), Designs, Codes and Cryptography (DCC)和CVPR/ICCV/ECCV/MM/AAAI/IJCAI/WWW/DAC/INFOCOM等相关领域顶级会议上发表论文50余篇,主持国家级/省级青年项目2项。个人主页:https://faculty.hitsz.edu.cn/BinChen
图
1
邱怡翔
同学荣获校级优秀本科毕业设计(论文),获奖率仅3%
图
2
邱怡翔同学论文的
部分成果以第一作者身份被ECCV 2024 Main Track录用
图
3
俞文博同学荣获校级优秀本科毕业设计(论文),获奖率仅3%
图
4
俞文博同学在
VTC
2024
Sprin
g Main Track
上口头报告论文成果
(新加坡)