华南理工大学-百步梯学堂音视频媒体处理平台

案例介绍

该项目服务于华南理工大学，是直属教育部的全国重点大学，位列国家“双一流”“211工程”“985工程”。

在教育数字化转型浪潮下，学校积极探索人工智能与本科教育教学的融合，构建了“百步梯学堂”平台作为其数字底座。在此基础上，本项目着力打造音视频媒体处理平台，为“百步梯学堂”的建设提供坚实支撑。平台以资源管理为基石，实现教育资源的高效汇聚、精细管理、在线教学以及督导评价一体化管理，并为师生提供了便捷统一的服务入口。

建设内容

1.智慧资源管理

整合校内教室录播资源、教师教学资源、三方合作资源等，形成校本资源库。借助先进的音视频处理和智能化分析技术，对教学资源进行智能分析，包括语音识别、人脸识别、文字识别、PPT 识别、标签识别等多种能力，生成结构化数据。同时，配备智能语音剪辑、精品课剪辑、片段剪辑等工具，深度挖掘资源价值，产出优质教学内容。

2. 授课视频直播点播

基于华栖云超高清视频流矩阵技术，接入并汇聚华南理工大学三个校区440间录播教室授课视频流及PPT流，实现依据课表进行在线直播、点播授课，并自动录制存储至资源平台。课程支持教师画面、学生画面、PPT画面的多画面展示，师生可灵活切换视角。授课过程中，融入智能摘要、智能标签、AI 学伴等人工智能应用，提升教学互动性与学习效果。

3. 双语转写与翻译

对国际校区所有教室录播信号进行实时中英双语语音转写与翻译，满足实时双语教学需求，让学生可实时观看双语字幕。同时，对课堂实录进行后期双语转写与翻译，回看时支持呈现语音识别文本。

4. 知识图谱构建

提供知识图谱构建工具，运用OCR识别、NLP自然语言处理等算法，把知识点进行分类与关联，无需人工干预，自动智能生成课程知识图谱。通过将资源中的教学标签与知识图谱的知识点进行智能匹配，自动把资源挂载到知识点中。此外，支持教师根据教学实际自行构建和调整课程图谱。

5. 课堂教学质量评价系统

对接学校课表信息，搭建一校三区巡课平台，打造智能化常态化的督导巡课体系。可进行远程巡课，基于教室摄像头，捕捉师生课堂教学的互动情况和师生行为，智能分析课堂异常行为，教师教学和学生行为，如记录教师行为轨迹、学生到课率与专注度，分析课堂类型等，并生成详细的课堂数据分析报告。

6. 集成统一门户

打造统一学习门户，与学校已有教学平台进行对接整合，为教师、学生、管理者提供资源中心、教学中心、评价中心、AI创新中心的一体化应用服务。

项目成果及价值

1. 统一校级教育服务平台

建成校本混合式教学平台，为师生提供功能完善、简单易用、数据统一管理的教学与学习平台，形成围绕学校的一体化教学中心，实现全校师生共平台学习。

2. 校级资源高效整合

构建面向未来的数字资源平台，将校内智慧教室资源、教师教学资源、各类活动资源、三方合作资源等进行高效利用，改变原先资源分散，使用繁琐的问题。

3. 打造立体式评价体系

基于数智驱动，打造立体式教学质量监测与评价体系，以全过程、多模态教学数据为核心，实现对老师的多维度教学评价、对学生学习的精准把控。

项目优势及亮点

1. 全过程智能化驱动

将人工智能技术深度融入教育教学和管理全过程，为学生、教师、管理者分别进行“AI+”赋能，全面提升教与学的管理质量。例如，AI学习助手帮助学生智能总结课堂知识，AI备课助力教师快速设计课程、编写教案，AI课堂质量分析为教务决策提供依据。

2. 稳定的在线教学环境

基于华栖云自研直播流转换算法，可兼容不同品牌、时期、格式的录播设备和摄像头，解决录播教室历史建设兼容问题。基于多年案例经验及自研声画对齐算法，解决老旧录播设备与PPT声画不同步问题，顺利完成 440 间教室对接，保障常态化在线教学。

3.轻巧+专业的智能资源编辑

提供智能语音剪辑、精品课剪辑、片段剪辑等工具。其中，自研智能教学语音剪辑工具，为非专业剪辑老师提供一站式低门槛剪辑工具，结合语音和文字识别能力，通过文字反剪视频。