2018年7月28日，又拍云Open Talk | 2018音視頻技術(shù)沙龍·北京站正式亮相Techcode太庫(kù)孵化器，這是又拍云Open Talk | 2018音視頻技術(shù)沙龍繼深圳站、上海站之后的第三站。

又拍云Open Talk | 2018音視頻技術(shù)沙龍是又拍云Open Talk推出的專(zhuān)題活動(dòng)，專(zhuān)注分享音視頻技術(shù)、方案的落地經(jīng)驗(yàn);北京站集合了新浪、又拍云、谷人云、紋路科技等多家公司的優(yōu)秀講師，為現(xiàn)場(chǎng)和直播觀眾分享了干貨滿滿的內(nèi)容。

細(xì)節(jié)是互動(dòng)音視頻的訴求核心

谷人云CEO李志杰已經(jīng)是第二次參加Open Talk 的分享。在本次Open Talk中，李志杰介紹了《互動(dòng)音視頻開(kāi)發(fā)必須了解的那點(diǎn)小東西》。李志杰曾就職于騰訊無(wú)線、盛大、阿里數(shù)娛、蘇州蝸牛等企業(yè)，后創(chuàng)立谷人云。

谷人云作為互動(dòng)視音頻領(lǐng)域的領(lǐng)先平臺(tái)，在視頻連麥、即時(shí)通訊、實(shí)時(shí)語(yǔ)音方面擁有豐富的開(kāi)發(fā)經(jīng)驗(yàn)。自2017年開(kāi)始，吃雞游戲、狼人殺、抓娃娃、在線答題等各類(lèi)音視頻互動(dòng)應(yīng)用的爆發(fā)，令互動(dòng)音視頻逐漸成為互聯(lián)網(wǎng)社交、娛樂(lè)應(yīng)用的標(biāo)配之一，甚至微信小程序都開(kāi)放了音視頻組件。“樂(lè)器陪練、遠(yuǎn)程教育、視頻麻將、直播、陪聊等娛樂(lè)、教育、社交等各類(lèi)互聯(lián)網(wǎng)應(yīng)用，都需要互動(dòng)音視頻的加入。”

李志杰認(rèn)為，各類(lèi)互聯(lián)網(wǎng)應(yīng)用對(duì)互動(dòng)音視頻的核心訴求，都體現(xiàn)在細(xì)節(jié)里面：延遲、圖像處理、音效、音質(zhì)、網(wǎng)絡(luò)容錯(cuò)、信令、方向等。從圖像采集、圖像處理、傳輸?shù)拳h(huán)節(jié)出發(fā)，李志杰詳細(xì)分享了互動(dòng)音視頻開(kāi)發(fā)容易遇見(jiàn)的坑，包括采集、采樣率、噪聲抑制、混音、編碼、音質(zhì)提升、傳輸?shù)取?/p>

窄帶高清原理大解析

又拍云是國(guó)內(nèi)較早推出“窄帶高清”功能的云服務(wù)商。又拍云多媒體開(kāi)發(fā)資深工程師朱高鋒負(fù)責(zé)又拍云音視頻云處理相關(guān)的研發(fā)工作，參與了又拍云“窄帶高清”功能的研發(fā)，在Open Talk現(xiàn)場(chǎng)分享了又拍云開(kāi)發(fā)“窄帶高清”的思路。

視頻轉(zhuǎn)碼的成本遠(yuǎn)遠(yuǎn)小于帶寬的成本，“窄帶高清”可以在視頻主觀質(zhì)量損失沒(méi)有感知、編碼和文件格式不變的情況下，節(jié)省30%碼率，可以大大降低帶寬的成本。

朱高峰介紹了“窄帶高清”的基本原理：通過(guò)分析視頻內(nèi)容，選擇部分肉眼不會(huì)注意到的內(nèi)容壓縮碼率，進(jìn)而節(jié)約碼率。“比如說(shuō)2兆的情況下，運(yùn)動(dòng)劇烈的可以達(dá)到40DB，靜止的可以達(dá)到45DB，相同的碼率下，運(yùn)動(dòng)劇烈和不劇烈的視頻質(zhì)量也是不一樣的，這就給我們一個(gè)操作的空間。在人眼感知不到視頻質(zhì)量失真情況下，保持相同編碼標(biāo)準(zhǔn)和封裝格式，減少視頻的碼率。”

“窄帶高清”首先會(huì)輸入視頻轉(zhuǎn)碼的分片，分析視頻的復(fù)雜度和分場(chǎng)景，比如運(yùn)動(dòng)緩慢或者是劇烈的，不同場(chǎng)景會(huì)有不同的編碼參數(shù)，這之中還會(huì)有碼率控制的算法來(lái)調(diào)節(jié)編碼器的輸出，最終得到編碼后的視頻。

微博搭建視頻轉(zhuǎn)碼系統(tǒng)的三個(gè)目標(biāo)

短視頻行業(yè)的興起，微博的視頻轉(zhuǎn)碼作為基礎(chǔ)服務(wù)，承載著百萬(wàn)級(jí)的用戶視頻處理。在使用微服務(wù)架構(gòu)下，會(huì)遇到不少挑戰(zhàn)，比如任務(wù)調(diào)度、多碼率下發(fā)等。新浪微博視頻轉(zhuǎn)碼系統(tǒng)研發(fā)負(fù)責(zé)人負(fù)責(zé)微博視頻轉(zhuǎn)碼系統(tǒng)的架構(gòu)設(shè)計(jì)及研發(fā)，專(zhuān)注于音視頻處理及高并發(fā)的架構(gòu)設(shè)計(jì)方向。

在《微博視頻轉(zhuǎn)碼系統(tǒng)架構(gòu)實(shí)踐》的分享中，杜東澄從構(gòu)建可靠、快速、靈活的轉(zhuǎn)碼系統(tǒng)架構(gòu)出發(fā)，分享了基于 DAG 的任務(wù)調(diào)度，以及如何通過(guò) DAG 框架靈活的支持分片轉(zhuǎn)碼和基于 DASH 的多碼率下發(fā)等高級(jí)功能。

杜東澄總結(jié)了微博搭建視頻轉(zhuǎn)碼系統(tǒng)時(shí)的三個(gè)目標(biāo)：靈活、快速、穩(wěn)定。

第一個(gè)，轉(zhuǎn)碼系統(tǒng)需要滿足微博業(yè)務(wù)需求、產(chǎn)品需求，以及內(nèi)部系統(tǒng)優(yōu)化、任務(wù)迭代等需求，“在這個(gè)方面，我們要做的是靈活支持業(yè)務(wù)需求，比如說(shuō)有一個(gè)新的產(chǎn)品需求，我們要很方便的支持他，避免做一次大改的情況。”

第二，從任務(wù)調(diào)度的維度，我們要降低任務(wù)延遲，要提高吞吐量。

第三，從服務(wù)架構(gòu)的角度，要能夠很容易的監(jiān)控任務(wù)，這個(gè)維度是穩(wěn)定。

杜東澄在分享中，介紹了微博在搭建視頻轉(zhuǎn)碼系統(tǒng)時(shí)，如何一步步實(shí)現(xiàn)靈活、快速、穩(wěn)定這三個(gè)目標(biāo)。

多格視頻互動(dòng)的不足和解決

紋路科技CTO趙凌在服務(wù)系統(tǒng)構(gòu)建、流媒體、社交產(chǎn)品及內(nèi)容推薦方面有豐富的技術(shù)經(jīng)驗(yàn)和深入的技術(shù)研究。為本次Open Talk帶來(lái)了《多格視頻互動(dòng)的技術(shù)實(shí)現(xiàn)》的分享，以“動(dòng)次App”為例介紹了移動(dòng)平臺(tái)實(shí)現(xiàn)視頻多格拼接過(guò)程中的問(wèn)題，和相應(yīng)的解決方案。

短視頻已經(jīng)從一個(gè)單獨(dú)的App形態(tài)，成為許多App內(nèi)置的應(yīng)用場(chǎng)景。紋路科技旗下的“動(dòng)次App”基于多格視頻的用戶間互動(dòng)，希望能從眾多產(chǎn)品中突圍。

趙凌從音視頻處理的公共問(wèn)題、通用方案的不足，以及個(gè)性化問(wèn)題等角度出發(fā)，介紹了“動(dòng)次App”如何有針對(duì)性地解決以上問(wèn)題，以及個(gè)性化問(wèn)題的技術(shù)實(shí)現(xiàn)。

對(duì)于未來(lái)的方案演進(jìn)，趙凌發(fā)給出了三個(gè)建議：基于對(duì)畫(huà)面的實(shí)時(shí)場(chǎng)景分析，自動(dòng)調(diào)整濾鏡的參數(shù);基于對(duì)于音頻內(nèi)容的分析，自動(dòng)進(jìn)行轉(zhuǎn)場(chǎng)及疊加特效;強(qiáng)化一鍵修音、校準(zhǔn)音高、節(jié)奏、多軌同步等音頻處理。

關(guān)于 又拍云Open Talk | 2018音視頻技術(shù)沙龍·北京站 的分享詳情，請(qǐng)持續(xù)關(guān)注又拍云微信公眾號(hào)，也可移步 Open Talk 官網(wǎng)。

本站部分文章來(lái)源于網(wǎng)絡(luò)，版權(quán)屬于原作者所有；如有轉(zhuǎn)載或引用文章/圖片涉及版權(quán)問(wèn)題,請(qǐng)聯(lián)系我們處理!