"领导,现在您看到的就是使用了声网SDK达到的效果,目前是1080p 60帧,16路视频,cpu占用不到30%。"

“效果不错么,有种身临其境的感觉。”领导满意的点了点了头。

“达到这个效果,还挺不容易的。”

“不会吧,SDK不是现成的么,集成进去不就可以了?”领导睁大他的小眼睛看着我,眉宇间透漏着不相信。

“SDK是现成的,但声网没有现成的解决方案,因为我们的业务比较特殊,听我给您慢慢道来......”

"keiler,今天你第一天入职,我先给你讲下我们的业务场景,我们主要的业务是双师课堂。所谓双师是当前K12领域一种新的教学模式。每堂课采取主讲与辅师相互配合的方式完成。其中,主讲教师主要通过视频直播的形式讲解课程内容,辅老师在课上负责与主讲老师配合开展教学及互动,记录学生课堂表现,并维持课堂秩序,在课后负责答疑、批改作业及与家长沟通等服务工作。学生仍需到教室观看视频上课,课上通过平板等设备与主讲老师进行答题互动,听懂了么?“

“没听懂。”我自信的回答道。

“我给你画张图。”领导无奈的拿起了笔。

“主讲老师在北京的专业演播室进行授课,通过实时音视频技术将音频及视频传输到外地的教室。外地教室的学生通过位于前方的大屏幕电视进行观看,同时有一个辅师在现场配合主师,主要是维持秩序,辅导学生。 实时音视频不同于直播,一般都是毫秒级延时,所以主讲老师在和学生互动时,不存在沟通障碍,这种模式解决了资源分配不均匀的问题。同时也降低教育机构的师资成本,一般三线及以下地区很难聘请到优质的师资。使用一线城市的优质教师资源,可以提高教学质量。但它也有自身的局限性,比如:线上课程场景单一,互动缺乏;主讲老师端对学生不熟悉,学情难掌握,无法及时抓住学生兴趣点等问题往往会造成学生“被动”听课,缺少参与感。这回明白了么?”

“好像明白了一些。” 我单手拖着下巴回答,同时陷入了深深思考。

“这其中用到的技术,就是实时音视频传输。我们目前采用的是一套国外的视频会议系统,下面我们要利用声网来搭建一套更贴合我们业务场景的系统。那么你接下来的任务就是了解下声网的SDK,熟悉api,熟悉demo。知道自己干啥了吧,我还有个会。”领导默默转身离开,留下我一个人静静发呆。

"帧率、分辨率、码率、直播、RTC 这都什么鬼?"看了一遍文档和api,我发出了这样的感慨。之后我决定换种思路,任何知识点的外围都存在一个整体的框架,当学习一个新的知识的时候,先从框架入手,然后再去填充细节,这是多年的工作经验积累下来的认知。于是我开始在互联网搜索关于实时音视频相关的知识,开始还是看不懂,但是当量积累到了一定程度之后,按照哲学理论,一定会引起质变,于是乎在一个阳光明媚的下午,感觉灵光一闪,仿佛被什么东西击中了一样。我明白了那些复杂的概念,此时再去看声网的文档,就变得简单了,在此也希望声网的官网上能有些音视频基础知识的讲解,起到给一些小白用户一个引路的作用。那么如何使用声网SDK来完成我们的业务需求呢,其是很简单。

(1),所有主师端和辅师端都进入同一个频道,对应我们的场景就是同一堂课。类似视频会议系统一样,所有人进入了同一个会议,大家相互可看见,可听见。

(2),根据业务需求,辅师端只需要接受主师的音视频即可,无需看其他辅师端,所以需要将其他的音视频流禁用。而主师需要接受所有的音视频流。

(3),主师利用手中的ipad,采用IM消息推送的方式,对所有的终端进行信令控制,而这也是声网建议的做法。

大的方向知道了之后,接下来投入开发么?当然没那么简单。我们的业务场景对性能有要求,主师端需要采集1080p 60帧。这个指标在业内并不常见,而这也是我们的优势,如果达不到这个指标那投入 开发就是浪费公司资源,所以需要先确定性能是否达到满足,这样才能最小程序减少风险。在声网官网找到了他们提供的demo,不得不夸奖一下,demo的类型和平台还是很丰富的。与我们最相符的openLive,找了能采集60帧的相机和配置不错的电脑,输入频道号,等待奇迹发生。但奇迹好像不那么容易出现,领导过来只瞧了一眼,就告诉我帧率不到60。我看了一下声网后台的统计数据,果然只有50帧左右。都说领导的视角不一样,这么一看真的不一般。找了声网的售前技术支持,一番沟通后,对方说我方网络环境不可以。领导听后大发雷霆,因为我们现在使用的软件并没有网络而产生问题,并且我们这是专线。结果又是一番沟通,测试最后还是达不到要求,无奈声网售前只能亲自跑一趟。在售前到达了之后又是一番测试,排查。后来在使用了硬件编码之后终于达到了稳定的60帧。强烈建议声网对于不同的性能要求出一套实测的硬件标准,什么的网络,什么样的cpu或者显卡 才能符合这个标准。一切准备就绪,貌似可以大干一场了,但是突然间,疫情来了。悄无声息但浩浩荡荡。

万众一心,众志成城,国家忙着抗击疫情,公司忙着转到线上,所有线下教室全部停掉。为此研发春节期间加了近半个月的班,每天直到凌晨,到现在加班的工资还没有发放,疫情带每个人的伤痛都是不可弥补的。时间进入5月,疫情缓和,各行业开始复工复产,疫情就像一个淘气的孩子,跑来折腾一圈,然后又走掉了,跟当前它哥哥----非典性格一样。项目重新开始上马,一切照旧。 不过这次我决定将UI框架进行更换,因为基于C++语言, 在开发客户端方面,有一套叫做Quick的界面框架,开发效率高并且美观,所以我决定将框架更改,做的更炫一些,但就是这个唐突的想法,让进度又耽误了一周。

时间在指尖飞快的流逝,代码也一行一行写下。一周时间,产品出炉,看着漂亮的界面,满意的点了点头。因为它确实挺好看的。

领导了看也表示满意,然后随口一问:“帧率怎么样,稳不稳?”

“年前测试过了,没有问题!”我坚定的回答道。

可是结果出乎所有人意料,帧率确实稳定在60左右,但是出现了频繁的跳帧现象。这个是以前没有出现的。和声网的一番沟通之后,对方说我的渲染方式有问题,因为这次为了更换界面,我用了自渲染。自渲染无法达到我们的性能要求,需要更改为SDK渲染,就相当于一种方式是我自己绘制视频,一种是利用声网SDK绘制视频。这个结果令我沮丧,辛苦改过来的代码,难道还要改回去。我让领导去和声网沟通,表示更改方式,时间上太长,并且不利于后续扩展,希望对方解决自渲染的问题。领导听我一番讲解,觉得很有道理。于是去和声网沟通,为此对方特意派来了一个很牛的技术和一个很美的商务。一番了解之后,表示我方要求合理,承诺回公司和研发沟通。一天之后,明确表示无法更改,技术上实现困难,建议更改为SDK渲染。听到这个消息,我脑海中想起了那首歌,“我想哭但是哭不出来。。。”

在牺牲了陪娃的时间,做美梦的时间之后,用了大概一周又改回到了原来的模式,但是主界面仍然保留了Qucik的框架,这样既美观也满足要求。我将软件按照了到了不同的电脑,开启自动测试,不听的进入和退出频道,本想冲杯咖啡,坐等结果。可是咖啡还没泡好,软件崩溃了。“我想哭但是哭不出来。。。。”,歌声再次响起。 我从头到尾排查了自己的代码,没发现任何问题, 无奈只好又找到了声网的技术支持,在对方的指导了我捕捉 到了崩溃的异常,发给声网的工程师,经过短暂的分析后,定位到了问题,此版本SDK有bug,我既欣慰又难过。欣慰的是球不在我这里,难过的事,时间又耽搁了。但出于意料,这次问题的解决比以往顺利,声网的研发人员,用了不到一周时间就将bug解决,经过我验证,性能满足要求,不再崩溃。后续反思,声网的技术没有问题,但是我方业务比较特殊,所以这个合作的过程一定不是一帆风顺的,需要双方相互理解,共同努力。就此,所以底层问题问题解决,客户端开发完毕,目前正在等待移动端开发介入。

“有点意思。”领导听完我漫长的讲述后,意味深长的点头说道。

基于声网SDK的双师授课系统开发相关推荐

  1. 视频直播系统解决方案—是基于声网SDK实现的

    "在2019年5G创新发展峰会暨中国联通全球产业链合作伙伴大会上,中国联通董事长王晓初正式宣布联通5G实验网开通." 伴随5G的到来,网络流畅度的提升,视频直播系统将持续火爆,视频 ...

  2. 声网 SDK 接入以及音视频通话应用开发指南

    1. 简介 在如今的移动互联网时代,音视频相关应用已经深入到我们日常生活的方方面面. 而在它背后的音视频技术也是非常成熟了,短视频编辑.带货直播.视频语音通话等应用形式无不体现着音视频技术给我们生活带 ...

  3. 声网sdk android接入,声网 SDK 接入以及音视频通话应用开发指南

    1. 简介 在现在的移动互联网时代,音视频相关应用已经深刻到咱们平常生活的方方面面.java 而在它背后的音视频技术也是很是成熟了,短视频编辑.带货直播.视频语音通话等应用形式无不体现着音视频技术给咱 ...

  4. 【软考——系统架构师】系统开发基础知识

  5. 中华会计网吉安双师教学中心

    中华会计网校(吉安校区)是中华会计网校旗下的双师教学中心,凭借雄厚的师资力量.专业的交互式系统,先进的智能财税技术,教练式,保姆式陪伴教学体系,为吉安财税人才培养贡献力量. [开设课程]:零基础会计. ...

  6. anyRTC - 助力双师课堂

    在线教育的概念已经存在很多年,但是发展的并不顺利,强烈的需求跟现实体验产生了极大的反差,江湖告急,为突破国内在线教育困局,anyRTC挺身而出. 近几年,随着移动互联网的高速发展,在线教育的呼声一直很 ...

  7. 小鱼易连推出肩膀计划,打造云+端双师课堂解决方案

    说实在的,这是让我尤为感动的一场发布会. 小鱼易连CEO袁文辉提到:"肩膀计划不是在给孩子盖学校.修教室,而是连接中国百万优秀教师以及千万贫困地区的孩子们." 5月17日,小鱼易连 ...

  8. 中职双师型教师计算机培训总结,中职教师教学能力远程培训总结范文(精选3篇)...

    中职教师教学能力远程培训总结范文(精选3篇) 时间就如同白驹过隙般的流逝,回顾这段时间的教学,一定经历了许多,也收获了许多吧,是不是需要好好写一份教学总结呢?你知道领导和老板想要看到的是什么样的教学总 ...

  9. 高师培训计算机心得体会,双师型教师计算机培训心得体会

    双师型教师计算机培训心得体会 冰冻三尺,非一日之寒,教师专业化水平的逐渐提高,要通过教师不断学习.钻研理论知识并结合实际经验,才能逐步走向成熟,下面是小编为您带来的双师型教师计算机培训心得体会相关内容 ...

最新文章

  1. 在Visual C++下搭建OpenGL的开发环境
  2. 从经济学与市场机制中,AI可以学到什么?| 美国三院院士迈克尔乔丹教授
  3. jasp报错_JSP报错!成功解决问题200+追加分数!
  4. Redis入门基础详解
  5. could not open C:\Program Files\Java\jdk1.6.0-11\lib\i386\jvm.cfg
  6. 《直播疑难杂症排查》之三:首开慢
  7. 可爱的穆里尼奥,可爱的切尔西!
  8. Java的接口、继承与多态
  9. Redhat linux 5.3 基于bond的heartbeat
  10. 电脑的虚拟服务器位置,如何配置基于IP地址的虚拟主机
  11. M1支持Windows arm_新款Macbook air,史上最强M1芯片,能买吗?有哪些注意的
  12. 多线程的那点儿事(之多线程调试)
  13. 虚拟机怎么查找服务器管理员,“你瞅瞅人王工家的VMware管理员~”
  14. c#垂直投影法_形象理解“梯度”与“法向量”的关系
  15. 手把手教你用TensorFlow、Keras打造美剧《硅谷》中的“识别热狗”APP
  16. [必须要了解的React状态管理]阅读hox对状态管理的思考
  17. AI时代,数据工程师必备知识总结
  18. altium designer 心得
  19. 数字图像的类型——伪彩色,真彩色,假彩色
  20. 咏春拳谱之寻桥(套路详解)

热门文章

  1. 跟着Cell学单细胞转录组分析(十二):转录因子分析
  2. PAT乙级练习题1019 数字黑洞
  3. python readline_python的readline()函数
  4. 自然资源资产-经营模式
  5. 人渣、人员、人手、人才、人物,员工五大类,你怎么搭配?
  6. 论文笔记 Deep Facial Expression Recognition: A Survey深度面部表情识别调查
  7. 软件生命周期的六个阶段
  8. 自制Jlink ob 072
  9. 设置 SQL Server 警报通知
  10. 虚拟机安装mac系统,在开机页面无限重启情况