实时音视频
-
从零开始构建直播系统 02 – 如何通过WebRTC检测媒体设备
用过音视频会议或在线教育等实时交互软件的人都知道,当摄像头(Camera)或麦克风(Micphone)开启时,首先要进行检测。检测内容包括: 以手机为例,一般包括前置摄像头和后置摄…
-
从零开始搭建直播系统01——如何通过浏览器访问摄像头
许多JavaScript开发者主要认为JavaScript是一种控制网页的工具。可能很难想象将JavaScript用于音频和视频处理。你可能会想,JavaScript或浏览器的性能…
-
如何运用仿真技术保护 RTC 用户体验
本文整理了 Wurzel Parsons-Keir 在 RTC@Scale 2023 关于运用仿真技术保护 RTC 用户体验的介绍,包括了研究原因、系统实现、讨论总结等内容。 来源…
-
SAFR: 自适应帧率的 RTC 系统 | NetAISys 2023
实时通信(RTC)系统在传输过程中往往会丢失一些帧以应对拥塞的情况。虽然帧丢失有助于提高系统的低延迟性能,但它可能会造成丢帧率突然上升和显著的 QoE (Quality of Ex…
-
直播 RTM 推流在抖音的应用与优化
背景 随着互联网技术以及网络基建的快速发展和普及,视频直播已经成为了一种越来越普遍的娱乐和社交方式。无论是个人还是企业,都可以通过视频直播平台进行直播活动,向观众展示自己的生活、工…
-
uniapp实现多人视频聊天(uniapp音视频开发系列9)
本文展示如何使用 ZEGO uniapp实时音视频 SDK 构造多人视频聊天场景,即实现多对多实时音视频互动。用户可在房间内与其余用户进行实时视频通话,互相推拉流。该场景可用于多人…
-
元宇宙中的实时通话
在当今快速发展的技术环境中,虚拟通信已成为新常态。虚拟现实 (VR) 和增强现实 (AR) 的出现彻底改变了用户见面和聚会的方式。随着视频会议 (VC) 软件的广泛采用,远程通信变…
-
元宇宙中的实时音频:REAL-TIME AUDIO AT META SCALE
本文将涵盖在 Meta 旗下的应用程序包括 Messenger、Instagram、Facebook 和 WhatsApp 中为用户提供可靠且高质量的音频体验所需的要素,以应对各种…
-
对话钉钉音视频专家冯津伟:大模型不是万能的
在音视频技术领域,ICASSP 大会是行业的风向标会议,也是语音学界从业者研究下一代技术发展的盛宴。近期,国内外各大企业陆陆续续放出论文入顶会的消息,钉钉蜂鸣鸟音频实验室 2 篇论…
-
音频格式–MP3格式介绍
发展背景MP3 技术的起源在 Hans Musmann 教授的一篇论文中进行了全面描述。在 80 年代末和 1990 年代初由德国弗劳恩霍夫协会的一组工程师在 Karlheinz …
-
什么是通讯API?如何选择通讯API
在快速发展的商业环境中,有效的沟通是成功的核心所在。然而,传统的通讯方法不足以满足不断发展的企业需求。今天,企业需要不间断地访问视频会议、即时通讯功能、双向短信和其他通信功能。这就…
-
音视频问题汇总–如何兼容实时音视频加密?
背景介绍: 最近收到一个网友问题,说他们设备不兼容客户的zrtp SHA 80的加密,他们搞了几天没有完成,问是否可以协助一下。 最初定位是因为不支持SHA80的,那做一下兼容就可…
-
音视频相关协议-hdcp
一、前言: 传输数字内容时,容易受到未经授权的复制和拦截。保护内容已经成为视听内容传输中的重要因素。2003年,英特尔开发了一种加密技术,称为高带宽数字内容保护(High-band…
-
RTC的发展历程及2023年趋势预测
本文分享者 Jonathan Christensen 已经在实时通信(RTC)行业工作了20余年。从在微软担任 RTC 的第一个 GPM 开始,Jonathan Christens…
-
解密实时通话中基于 AI 的一些语音增强技术 | ICASSP 2023
背景介绍 实时音视频通信 RTC 在成为人们生活和工作中不可或缺的基础设施后,其中所涉及的各类技术也在不断演进以应对处理复杂多场景问题,比如音频场景中,如何在多设备、多人、多噪…
-
实时通信 (RTC) 在多元宇宙中的作用
最近很多公司都在谈论他们通常称之为元宇宙的东西。对于什么是元宇宙没有一个明确的定义,但类似这样的东西听起来已经很接近了:”一个高度连接的环境,有很多互动的玩家和复杂的模…
-
uniapp音视频播放功能实现(uniapp音视频开发系列8)
uniapp应用程序播放音频、背景音乐或视频,需要媒体播放器组件提供支持。本文分享即构的uniapp实时音视频SDK中的媒体播放器组件功能和实现。 媒体播放器功能简介 媒体播放器组…
-
强化学习驱动的低延迟视频传输
随着视频会议、视频直播的流行以及未来AR/VR业务的发展,低延迟视频传输服务被广泛使用,但视频质量(QoE)还不能满足用户要求。那么近年来新兴的AI神经网络是否能为视频传输带来智能…
-
uniapp如何实现CDN直播(uniapp音视频开发系列7)
ZEGO uniapp实时音视频 SDK 支持将音视频流转推到 CDN(Content Delivery Network,内容分发网络),转推 CDN 指的是将音视频流从 ZEGO…
-
6种必知的直播流媒体协议:HLS,RTMP,SRT,MSS,MPEG-DASH和WebRTC
直播流媒体是一个持续增长的现象。事实上,在这项研究中,有80%的人表示,他们宁愿观看直播,也不愿阅读一篇博客文章。此外,与标准视频相比,通过直播流播放的视频收到的观看时间多了27%…