学术信息网 西电导航 关于 使用说明 搜索 系统首页 登录 控制面板 收藏 徐偲的留言板
科学研究

目前指导本科生开展的应用类科研课题基础类科研课题和我最近发表的论文相关),欢迎全年级段的本科生加入:

一、基于深度学习的脑瘫患者语音识别研究

图1 基于深度学习的脑瘫患者语音识别研究海报介绍
  1. 项目简介:
  • 脑性瘫痪(简称脑瘫)是一种影响运动和姿势的持续性疾病,核心特征为运动控制障碍。在我国,脑瘫患者数量庞大,其中不少患者面临着严重的语言交流障碍。虽然这些患者在交流上遇到了困难,但他们的言语中存在可识别的规律性,类似于一种特殊的“方言”。
  • 本项目旨在开发一种基于深度学习的智能系统,通过语音识别技术,来改善脑瘫患者的沟通能力。这不仅能够为患者提供更自然、准确的交流方式,也有助于提升他们的生活质量和社会参与度。
  1. 招募需求:
  • 文献调研: 收集并分析当前深度学习、语音识别和多模态识别领域的最新研究,了解脑瘫患者语音的特点和挑战。
  • 市场调研:精确定位该项目的市场需求。
  • 数据收集与预处理: 协助收集脑瘫患者语音样本,进行数据清洗、标注和特征提取等预处理工作。
  • 模型开发与训练: 根据项目需求,开发和训练深度学习模型,包括但不限于神经网络设计、参数调优和性能评估。
  • 原型系统开发: 参与开发可用于实际应用的原型系统,包括用户界面设计和后端逻辑实现。
  • 测试与优化: 在真实场景下测试系统性能,收集反馈进行优化改进。
  1. 技术先进性:
  • 深度学习模型的优化和个性化:项目开发的深度学习模型不仅在通用性能上优化,还注重个性化调整,以适应不同脑瘫患者的独特语音特征。通过持续学习和模型微调,能够实现高度个性化的语音识别,满足各类患者的具体需求;
  • 实时语音转换和辅助通信技术:利用最新的实时处理技术,本项目旨在为脑瘫患者提供即时语音转换和辅助通信能力,极大地改善他们的社交互动和生活质量。这种实时性能的突破,为患者提供了前所未有的沟通便利。用于其他医疗辅助领域提供有力的示范和引领作用。
  1. 项目产出:
  • 科技成果转化为产品: 通过与企业的合作,将研究成果转化为具体的辅助工具和应用,直接服务于脑瘫患者和康复机构。
  • 学术成果转化: 发表高质量学术论文,并通过学术会议、研讨会等形式,分享研究成果和经验,提升项目的影响力,促进相关研究领域的进一步探索。
  • 社会公益项目: 与公益组织合作,将项目成果应用于社会服务,如提供免费或低成本的语音辅助工具给经济条件较差的脑瘫患者。

 

二、深度学习驱动的篮球视频智能剪辑系统

图2 篮球视频自动剪辑效果示意(参考ICCV 2021文章链接
  1. 项目简介:
  • 该项目是一款专为篮球爱好者和内容创作者设计的深度学习驱动的视频剪辑系统,致力于通过先进的计算机视觉技术和深度学习算法自动化处理篮球比赛视频,精准提取关键动作、精彩瞬间及战术分析片段,极大地简化用户在海量视频素材中的筛选与剪辑工作,提升内容创作效率。
  • 该项目旨在通过前沿的深度学习技术、精准的视频分析能力以及丰富的应用场景,革新篮球视频剪辑方式,赋能内容创作者,推动篮球文化传播,实现技术与体育的深度交融。
  1. 招募需求:
  • 文献调研: 收集并分析当前深度学习、视频识别和视频生成领域的最新研究,了解运动行为的特点和挑战。
  • 数据收集与预处理: 协助收集各类运动视频样本,进行数据清洗、标注和特征提取等预处理工作。
  • 模型开发与训练: 根据项目需求,开发和训练深度学习模型,包括但不限于神经网络设计、参数调优和性能评估。
  1. 技术先进性:
  • 智能化教学平台构建:项目采用先进的AI技术,如深度学习等,构建智能化视频生成平台。该系统能够精准识别用户运动行为、根据用户个性化需求,推送定制化视频生成内容,实现视频生成的智能化、个性化与精准化。
  • 大数据驱动的教育决策支持:项目依托大数据分析技术,对视频数据进行全面、深度挖掘,进行视频剪辑生成,为用户提升运动体验。
  • 云计算支持下的教育资源共享:项目借助云计算技术,构建开放、灵活、可扩展的运动云平台,打破地域、校际壁垒,实现精彩视频的高效汇聚、便捷检索与公平共享,促进用户留存。
  1. 项目产出:
  • 供个人使用:篮球爱好者和自媒体创作者可以使用该项目快速生成包含精彩瞬间、个人集锦或战术解析的短视频,分享到抖音、快手、Instagram、Twitter等社交平台,吸引粉丝关注,参与线上讨论。
  • 供学校使用:通过和西电进行校内合作,在体育馆中进行投入使用,记录个人或者比赛的精彩内容。
  • 供企业使用:通过和企业合作,用于电视转播和直播平台,在直播过程中,实时调用项目对比赛进行即时剪辑,推送关键事件、精彩镜头给观众,提升观赛体验,增加用户粘性。
  • 供学术研究:体育科学、人工智能领域的学者可以利用系统输出的结构化视频数据,进行篮球运动规律、运动员表现评估、深度学习模型优化等相关研究。如果有算法上的创新突破,可以考虑发表高水平学术论文。