技术文章

听觉的产生- Acoustic 人的听觉过程是一个复杂的生理及心理过程。声波作用于听觉器官，引起听感细胞的兴奋并导致听神经的电脉冲发放传入信息，经各级听觉中枢分析后便产生听觉。 一…

本期文章为大家带来VR视频技术的相关知识。文章主要从VR视频压缩编码，视频传输，渲染显示等几个方向进行简单的介绍。 01 3DoF VR和6DoF VR VR视频是指全景视频，如水…

在分层架构中，Entry 向客户端提供了 TCP 长连接的接入能力，并对这些长连接的活性进行保活维护（IM专题：分层架构IM系统（1）—架构解读），所以在 Entry 服务内部有两…

图像分割是图像处理和计算机视觉的热点之一，是根据图像内容对指定区域进行标记的计算机视觉任务。它基于某些标准将输入图像划分为多个相同的类别，简言之就是「这张图片里有什么，其在图片中的…

本文提出了一种基于运动感知神经体素的快速三维头像重建方法 ManVata。ManVata是第一个将表情动作与标准外观解耦的头部模型，并用神经体素对表情动作进行建模。在给定单目视频的…

本文为大家分享什么是视频插帧、视频插帧有何应用意义、动画插帧与自然视频插帧有何不同、帧率和刷新率是一回事吗，以及流插帧算法之光流法是什么等问题。 什么是视频插帧？ 视频插帧，指通过…

一、QML与C++混合编程简介     QML与C++混合编程就是使用QML高效便捷地构建UI，而C++则用来实现业务逻辑和复杂算法。 二、QML访问…

WebRTC作为一个实时音视频传输技术，实时性是RTC技术的主要评判标准。在整个实时音视频系统中，对实时性影响最大的就是传输层。当今通信技术众多，但是都离不开两个基础的协议，即TC…

Camera1中我们可以通过onPreviewFrame接口直接获取到默认为NV21格式的预览数据， 如下图注释所示，还可以通过调用setPreviewFormat方法要求Came…

Camera API2是Google从Android5.0开始推出的配合HAL3使用的一套新架构，相比于API1，对应用层开发者而言开放了更多的自主控制权，主要特性包括： 可以获取…

据非官方说法，2015年被定义为中国互联网视频直播元年，笔者有幸在当年响应互联网大潮，试水了视频直播业务，但当时的关注点主要是如何让直播内容吸引眼球，获取更大的用户群来融资，内容为…

随着网络、终端设备的蓬勃发展，视频类业务呈两级分化态势发展，一方面是短视频的爆发，有效填充了用户的碎片时间，取得了非常客观的用户量及点击率；而另一方面则是沉浸式殿堂级别视频，诸如我…

一、M3U8格式 HLS(HTTPLiveStreaming)是苹果公司针对iPhone、iPod、iTouch和iPad等移动设备而开发的基于HTTP协议的流媒体解决方案。在HL…

在WebRTC中，前向纠错(FEC)和丢包重传(NACK)是抵抗网络错误的重要手段。FEC在发送端将数据包添加冗余纠错码，纠错码连同数据包一起发送到接收端；接收端根据纠错码对数据进…

问题： IM是互联网中非常典型的独立系统，麻雀虽小但五脏俱全，非常值得深入研究和探讨；继上次IM相关题目之后，我们继续讨论IM相关话题。 关于IM系统【消息收发模型】的相…

问题：对IM系统的消息存储应该如何设计呢？（说的通俗一些：如何设计IM系统的消息表？该题目不会故意为难大家，没有上过IM课的同学也是可以思考和判断的）关于【IM消息存储模型】的相关…

实时传送协议（Real-time Transport Protocol或简写RTP）是一个网络传输协议， 它是由IETF的多媒体传输工作小组提出的一个标准，对应的RFC文档为RFC…

本文分享什么是流媒体协议RTSP、RTSP协议交互过程、RTSP协议拉流和RTSP推流方式说明。 作者：壹零仓 | 流媒体协议之RTSP详解。 1 流媒体协议RTSP详解 1.1 …

几个世纪以来，人们一直在思考这样一个问题：“我们在宇宙中是孤独的吗？” 然而，迄今为止，搜寻地外文明(SETI)的研究人员明确表示“我们不确定”。但这并没有阻止人们的疑惑…

PeerConnection 是 WebRTC 连接流程中无法绕过的一个类，甚至可以认为这个类是整个连接流程的 Controller。本文着重介绍双人通话（一对一）的连接流程，读者…