18 天前 / 虞大胆
视频传输延迟，尤其是在某些互动社交环境中，会严重影响用户的体验。Instagram多年来以降低视频上传延迟为重要指标，实现了多种优化策略。本文来自Instagram媒体基础设施团队软件工程师Ryan Peterman。 文 / Ryan Peterman 译 / 蒋默邱泽 原文 https://instagram-engineering.com/video-upload-latency-improvements-at-instagram-bcf4b4c5520a 2013年6月，Instagram推出视频上传功能。当时系统功能很简单，为了摄取视频并用于播放。我们让Instagram app在客户端完成录制后将整段视频文件传至服务器，然后我们将视频转码为一组质量......
29 天前 / 苏生不惑
之前已经写过好几篇的奇技淫巧系列了，今天说说怎么快速下载视频。 我平常经常看视频的网站就是爱奇艺，b站，微博，知乎，网易这些。 这里以微博为例，下载周杰伦的《晴天》，微博地址是 https://weibo.com/1871765890/HyPPQoaeH 下面是几种下载方法。 自力更生按F12打开控制台，在network中搜索.mp4找到mp4文件 复制地址就是这个了 ，然后直接另存为保存到电脑。https://f.us.sinaimg.cn/001grNbNlx07u5gBTJMI01041203mpey0E020.mp4label=mp4_720p&template=1280x720.20.0&Expires=1560614974&ssig=vp5%2B3ARIGs&KID=unistore,video......
30 天前 / sprint
杨胖雨：《情深深雨濛濛》 杨胖雨对 《情深深雨濛濛》的翻唱可以说是炒鸡好听啊，你不妨听听。 01 前言 大家好，本文是iOS/Android 音视频专题的第六篇，该专题中 AVPlayer 项目代码将在 Github 进行托管，你可在微信公众号（GeekDev）后台回复资料获取项目地址。 在上篇文章OpenGL ES for Android 世界中我们已经对 OpenGL ES 有了大致的了解，在本篇文章中我们将使用 OpengGL ES 将解码后的视频进行播放。 本期内容： View与 Surface 的渲染机制 SurfaceView/GLSurfaceView 与Surface的关系 GLSurfaceView ......
33 天前 / 实时音视频A桑
作者：声网Agora 资深软件开发工程师 戚敏明 如今越来越多的用户开始对美颜/道具这一功能产生越来越大的需求，尤其是在泛娱乐场景下。而现如今市场上有许多第三方的美颜 SDK 可以供开发者选择使用，那么这些第三方的美颜 SDK 是否可以与 Agora RTC SDK 进行结合从而实现实时视频泛娱乐这一应用场景呢？答案当然是肯定的。 本文的目的就是要帮助大家快速了解如何使用。默认情况下，Agora RTC SDK 提供端到端的整体方案，Agora RTC SDK 负责采集音视频，前处理，然后将数据发送到对端进行渲染，这种运行模式通常能满足大多数开发者的需求。但如果开......
40 天前 / PingCAP
作者介绍 hawkingrei（王维真），中间件高级开发工程师，开源爱好者，TiDB & TiKV Contributor。 WaySLOG（雪松），Rust 铁粉一枚，专注中间件，bug creator。 本文根据hawkingrei &WaySLOG在首届 RustCon Asia 大会上的演讲整理。 今天我们会和大家聊聊 Rust 在我们公司的二三事，包括在公司产品里面用的两个工具，以及雪松（WaySLOG）做的 Cache Proxy —— Aster 的一些经验。 图 1 十年前，我司刚刚成立，那时候其实很多人都喜欢用 PHP 等一些动态语言来支持自己的早期业务。用动态语言好处在于开发简单，速度快。但是动......
58 天前 / u490380
在群里面有人提到了这么一个实现：现有一段素材视频，想要对视频中的某个内容进行替换，换成自己的图片，这个怎么用 OpenGL 去实现呢？ 首先要明确的是，视频是由一帧一帧图像组成的，它利用了人眼的视觉暂留效应，一秒内播放足够帧数的图片才会感觉到是连续的。 而想要对视频的内容进行替换，也就是要将每一帧图像的内容都进行替换了，一般来说这应该是属于视频后期处理了，用专业的 AE （Adobe After Effects）软件来处理会比较好。 处理思路如果用 OpenGL 来处理，有这样的一个思路： 首先通过 MediaCodec 对每一帧图像内容进行解码，然后再......
81 天前 / richardor
一、前言这篇文章主要想说明的是WebRTC内部对视频上下行延时、抖动、丢包如何更新，上层又怎么获取到这些统计信息的。对应的WebRTC版本：63。 二、背景最近在内网情况下测试视频会议，视频下行延时很大，很多时候超过100ms。另外，视频的上下行抖动总是稳定在30~40ms这个区间。这些统计在内网环境下是不正常的，于是决定看看是哪里导致这些问题的。 在解决这些问题的过程中，也对WebRTC内部视频统计数据做了一次梳理。 阅读这篇文章之前，最好对RTP、RTCP、SR、RR有一些了解。这里就不过多展开，可以参考以下文章： [RTP Data Transfer Protoco......
82 天前 / 实时音视频A桑
我今天给大家介绍的是 Flutter 实时音视频开发实践方面的经验。我叫张乾泽，毕业于英国牛津大学，之前在 SAP 主要担任移动端架构师，2017年加入声网Agora，目前是声网Agora 的高级架构师，主要负责 RTC 技术在娱乐、直播、教育等行业的应用研发工作。 首先我们讲到 RTC 应用，什么样是 RTC 应用呢？RTC 是 Real-time Communications。大家平时在日常生活中已经接触到非常非常多的RTC应用，比如说直播，大家平时会用手机看熊猫直播、斗鱼直播，实时看主播的游戏画面、他们唱歌的画面、跳舞的画面。还有教育，通过互联网可以实现远程教育，比如学生......
91 天前 / sprint
展展与罗罗：《沙漠骆驼》 01 前言 大家好，本文是iOS/Android 音视频专题的第四篇，从本篇文章开始我们将动手编写代码。代码工程将在Github进行托管。由于微信公众号不允许设置外部链接，你可以在微信公众（GeekDev）后台回复 资料获取项目地址。 02 MediaExtractor 的基本使用 对音视频媒体文件解码时，我们首先需要分离出媒体文件的音视频轨道，MediaExtractor就是干这个的，它可以告诉你媒体中轨道（Track）数量，并根据索引读取指定轨道数据。 API 概述 1. setDataSource(String path) 为分离器......
91 天前 / 实时音视频A桑
“ 作者：maverick、buhe，本文首发于RTC开发者社区，点击「阅读原文」可以与两位作者交流在线教室中的白板开发经验。 随着技术和基础设施的进一步演进，线下的教育、会议已有很大比重演进为线上的教育和会议，突破了空间的桎梏。需求的多样性爆发增长和场景的进一步拓宽也对技术产生了非常大的挑战，有别于传统视频会议的方案，现有方案更多考虑兼容性、平台多样性、移动化等，在产品的链路上也变的愈加丰富，从实时到录制、在到后期的信息检索和分析。在绝大部分在线教育、视频会议场景中，实时音视频互动与白板都是必备功能，然而实时音视频......
95 天前 / kbsc13
2019 第 37 篇文章，总第 61 篇文章 本文大约 1800字，阅读大约需要 5分钟 最近发现兴起了一股在Github上大学的潮流，目前可以选择的大学包括清华、北大、上海交通大学、中国科学技术大学、中山大学，然后今天还发现还可以选择上国外的名牌大学，包括斯坦福、麻省理工等。 所以小时候的清华北大二选一终于可以实现了，这是为什么呢？ 原来是有人整理了这些学校的一些专业课程资料，并放到Github上了。这里让我一一简单介绍下这些项目！ 北京大学目前Github上有两个项目是关于北京大学的课程资料，分别是： https://github.com/lib-pku/libpku......
98 天前 / php-v
视频处理平台的核心功能是视频转码，而转码压缩的过程势必会造成视频质量的损失。腾讯音视频实验室技术专家高孟平在LiveVideoStackCon 线上交流分享中根据腾讯丽影平台的开发实践经验，详细介绍了如何利用深度学习在提升视频转码压缩效率的同时提供更高的人眼视觉质量。在LiveVideoStackCon 2019上海 音视频技术大会中，高孟平博士还将介绍无参考质量评估在视频增强的进展与应用。 文 / 高孟平 整理 / LiveVideoStack 直播回放 https://www2.tutormeetplus.com/v2/render/playbackmode=playback&token=0febd6ef28094bb0b9d7859a2e6c4f68 ......
104 天前 / 极市小助手
加入极市专业CV交流群，与6000+来自腾讯，华为，百度，北大，清华，中科院等名企名校视觉开发者互动交流！更有机会与李开复老师等大牛群内互动！ 同时提供每月大咖直播分享、真实项目需求对接、干货资讯汇总，行业技术交流。点击文末“阅读原文”立刻申请入群~ 作者简介 陈泰红：算法工程师，研究方向为机器学习、图像处理 图像目标检测是图像处理领域的基础。自从2012年CNN的崛起，深度学习在Detection的持续发力，为这个领域带来了变革式的发展：一个是基于RPN的two-stage，RCNN/Fast RCNN/Faster RCNN、RetinaNet、Mask RCNN等，......
112 天前 / algorithmdog
| 导语来自中心姚博的大作。 为了能够对自动提取王者荣耀视频标签，我们需要对王者荣耀游戏视频中的英雄进行检测与识别，判断该视频中我方英雄以及友方和敌方，这就需要首先在视频中检测出英雄的位置和数量，然后对每个检测到的英雄，判断英雄的类别（我方/友方/敌方）并识别出英雄的姓名。笔者在实验过程中，发现了一种two-stage算法能够较好地解决这一问题，采用基于血条模版匹配+后处理的方法实现英雄的检测，第二阶段采用深度神经网络对检测到的英雄进行识别。 一、算法调研针对通用的图像或视频中的目标检测与识别任务，目前主流的算法......