音视频技术开发周刊 | 174

LiveVideoStack 2020年12月13日

架构


WebRTC和WASM如何给网络应用提供新机会

从依靠文字短信的延迟通信,到潜力无限的实时通信多媒体平台,我们在线通信协作这一领域的成就十分可观。

https://toutiao.io/k/oodw8i5 


深入浅出 WebRTC AEC(声学回声消除)

本文章将结合实例全面解析 WebRTC AEC 的基本框架和基本原理,一起探索回声消除的基本原理,技术难点以及优化方向。

https://mp.weixin.qq.com/s/iq6EWCQHoYTtAwZBzs8tYA 


新的Azure通信服务(ACS)如何实现WebRTC?

本文来自Housepaty的软件工程师Gustavo Garcia,他对Azure通信服务(ACS)进行了全面的评估,包括从浏览器兼容性、编解码器到带宽估计算法…..与主要对手相比成熟度还有差距。

https://mp.weixin.qq.com/s/AVOCaqmFJK01-oG7HmkspQ 


传输网络


淘宝直播高画质低延时技术探索

目前5G新基建正在迈入起航阶段,5G相比目前广泛使用的4G,它具有更高的速率,更大的容量,同时延迟更低,可靠性更高。在5G时代,视频得益于网络带宽的提升,未来将成为主流的传播媒介。越来越多的业务和应用将视频化,直播化。大量互动的内容将通过5G以低延时的方式以视频的形式传输。

https://mp.weixin.qq.com/s/jloojz4mVWpd7fKu8LUDVg 


编解码


ICASSP2020:VVC基于线性模型的帧内预测模式

本文来自ICASSP2020论文《LINEAR MODEL-BASED INTRA PREDICTION IN VVC TEST MODEL》,论文使用含3个参数的线性模型进行帧内预测 Linear Model-based Intra Prediction (LMIP),在VTM4.0平台上AI配置和RA配置下分别取得0.30%和0.14%的BD-Rate增益。

https://mp.weixin.qq.com/s/J6QXWsWrO8TABDVfCTL5fQ 


MHV2020


(每篇文章对应多场演讲)

Session 1

VVC—新标准及其性能/MPEG-5 EVC标准/MPEG-5 LCEVC/VVC和HEVC AV1的对比/VVC和EVC用于OTT分发的早期尝试

https://mp.weixin.qq.com/s/nCrQRD4CIb5zLXACxXzPNQ


Session 2

AI提升视频压缩的优势/视频编码中的深度神经网络:标准化的进展/x266-开源VVC编码器/AV1编码中基于CAE的智能优化算法/减少比特率是解决流量上升的唯一方法吗/电影颗粒的压缩——美学的保存

https://mp.weixin.qq.com/s/9H6Gk7XBy_BYzOv-3BNXhA


Session 3

处于不同位置的源的同步/为视频摄取构建动态映射服务/自动化UHD和HD生产分发工作流中视频信号点的使用/未压缩IP传输流的简单处理/Fenix项目——浴火重生/安全高效视频服务的多密钥DRM/构建跨平台自动化测试套件

https://mp.weixin.qq.com/s/hPJxVdRnhsHODmRBvWkGYQ


Session 4

揭开广告策略的面纱/在DASH实时传输中管理计划外的媒体转型/SVA技术发布要点和商业部署/音频分析:衡量哪些是重要的/最小化清单开销/MEDIADISTRLLERY

https://mp.weixin.qq.com/s/_yoYwFABqBHS6UFkGPjwtg


Session 5

20年来的流媒体/为DASH和HLS带来交互/DVB-I 互联网技术的线性电视/MPEG沉浸式媒体标准/MPEG中基于网络的媒体处理概述/下一代TV/CTA WAVE工具的更新

https://mp.weixin.qq.com/s/xWoq3V_pYXzbCtriKy3aPA


音视频技术


云音乐 Android 视频「无缝」播放实现总结

在网易云音乐 8.0 改版中,接到一个播放中的视频可以点击「小窗」按钮收起到 mini 播放条中继续播放的需求,刚接到这个需求时内心是崩溃的,要知道网易云音乐的 mini 播放条是一个可能会出现在 App 中的任何 Activity 上的 View,在不同 Activity 之间跳转时,如何能保证视频可以从一个 Activity “无缝”转移到另一个 Activity 呢?

https://juejin.cn/post/6904083382620291085


视频接入OpenGLES3.0实现特效

前面说过 OpenGLES 可以利用 片段着色器 对 纹理贴图 进行特效处理。对应视频来说也是一样,比如下面的红色效果,通过 MediaPlayer 不断更新视频纹理,再由 OpenGLES 进行绘制,在此之间就可以通过 片段着色器 对纹理进行操作,从而达到各种各样的特效。

https://juejin.cn/post/6903718814467883021


专为残障人士设计,这款AR眼镜竟然集成脑机接口

关于AR/VR的交互,一直都是讨论的焦点,而目前业界最看好的方向就是:脑机接口。虽然目前一些脑机接口项目已经公布初步探索成果,但是距离商用仍有一段距离。其中,对于非侵入式脑机接口而言,目前的训练成果更多集中在特定领域。正是这些前沿的探索,让脑机接口的应用和AR眼镜发展十分类似,可以在特定领域发挥更大的功效。

https://mp.weixin.qq.com/s/QXwqKFIxF6eGdvLK-GzBpA


AI智能


微信AI从识物到通用图像搜索的探索揭秘

微信识物是一款主打物品识别的 AI 产品,通过相机拍摄物品,更高效、更智能地获取信息。2020 年,微信识物拓展了更多识别场景,上线了微信版的图片搜索。本篇文章将与大家分享微信识物从识物拓展到通用图像搜索领域的发展过程。

https://mp.weixin.qq.com/s/z3A4cE-nyNrAieNPkXdD5A


AI还原的宋朝皇帝宋太祖

AI真是无所不能。这不,微博博主「大谷Spitzer」自己使用网上的开源AI模型,根据画像,给古代皇帝们做了次「真容」大还原。不仅如此,博主还对比了画像与演员们的相似度,看看这些「皇帝扮演者」们是不是真的和皇帝本人长的像。

https://mp.weixin.qq.com/s/DO-6RcpuFLGmpZ1SeBmmLQ


AI消除马赛克

GitHub开源项目上线三天收获近7000星。

https://mp.weixin.qq.com/s/LYbK-tyu5Kf97Gso7wFFig


图像


图像识别的可视化解释史

使用机器学习(ML)算法(尤其是现代深度学习)进行图像识别的最大挑战之一,是难以理解为什么一个特定的输入图像会产生它所预测的结果。我们为过去十年中最先进的图像解释技术整合了视觉界面,并对每种技术进行了简要描述。

https://mp.weixin.qq.com/s/se_XrzXwjs_G6H-i53JZ7g


资讯速览


咪咕汇首次实现基于5G切片的8k大屏商用直播

2020年12月5日,在第十四届音乐盛典咪咕汇-“全球首场5G+8K云演艺盛典直播”上,咪咕联合中国移动广东公司、北京公司、研究院,在集团技术部、网络部指导下,实现了基于5G切片,端到端4k+8K超高清直播的全面升级,业内首次将5G切片应用于商用大型8K超高清直播。

https://mp.weixin.qq.com/s/Gwmq1urzM3jtyVoY2z9hMw


内容推荐


【线上分享】华为云视频的Cloud Native实践


Cloud Native云服务的研发越来越普及,成为每个公司和软件人员的必备技能,然而从主机软件的转型需要经历漫长的过程,并且要需要经历较多的坑,才能逐渐走向成熟。

12月17日19:30,我们邀请到华为云直播服务Leader段亮,他将主要从经验和教训的角度,介绍华为云视频在Cloud Native转型实践中遇到的问题、挑战以及解决之道。

http://livevideostack.mikecrm.com/xXTgQsT


访问上方链接了解详情


还可输入800
全部评论
作者介绍

LiveVideoStack

阅读排行
  • 2周
  • 4周
  • 16周