iOS 出了replaykit2 后實(shí)現(xiàn)了系統(tǒng)屏幕錄制功能,終于不在只能應(yīng)用內(nèi)錄制了,在外部宣講ppt,變的容易了許多,如何創(chuàng)建使用這個(gè)網(wǎng)上有很多extension使用的方法,我在這里也不想多贅述,畢竟是固定方式方法

        我這里想講講關(guān)于如何將在extension中錄制的視頻流傳回主app并將視頻流發(fā)送到遠(yuǎn)端,這才是最關(guān)鍵,也是replaykit2這個(gè)功能的難點(diǎn)

主要需要解決的問(wèn)題

1.extension app 和主app 間的通信問(wèn)題,涉及到進(jìn)程間的通信

2.將共享的視頻轉(zhuǎn)換成可以傳輸?shù)臄?shù)據(jù)類(lèi)型,在轉(zhuǎn)回CMSampleBufferRef,用于編碼或者其他

3.共享與攝像頭之間的切換問(wèn)題 即 攝像頭 與錄制的開(kāi)關(guān)問(wèn)題

4.extension app共享屏幕 只有50M的內(nèi)存,峰值超過(guò)就會(huì)被系統(tǒng)殺死,結(jié)束共享

首先說(shuō)第一個(gè)問(wèn)題 :

1.通信問(wèn)題 使用socket 連接 主app做server端 extension做client端 ,用于將錄制的視頻數(shù)據(jù)傳回到主app

使用 CFNotificationCenterRef 做狀態(tài)消息的通知傳遞

2.將錄制的視頻數(shù)據(jù)轉(zhuǎn)為NSData 類(lèi)型通過(guò)socket 發(fā)送到 主應(yīng)用在轉(zhuǎn)換成CMSampleBufferRef,其中在轉(zhuǎn)為NSData類(lèi)型的過(guò)程中可以將視頻方向 錄制的分辨率一起帶上,錄制時(shí)就可以橫豎屏無(wú)感切換了

3.錄制視頻時(shí)需要暫停攝像頭的采集,停止在開(kāi)啟視頻,需要調(diào)用系統(tǒng)的stopCapture 和 finishBroadcastWithError 來(lái)開(kāi)啟暫停

說(shuō)說(shuō)我的項(xiàng)目 我的項(xiàng)目是使用 webRTC實(shí)現(xiàn)音視頻的通話(huà),與會(huì)議功能,使用replaykit2 實(shí)現(xiàn)屏幕共享功能,共享的屏幕傳到遠(yuǎn)端的通話(huà)中或者會(huì)議中,目前實(shí)現(xiàn)了使用ios原生開(kāi)發(fā),和使用reactive-native開(kāi)發(fā)ios和安卓端的,這一塊的功能都已經(jīng)完整實(shí)現(xiàn),并且已經(jīng)使用半年,目前運(yùn)行和反饋良好,穩(wěn)定

代碼部分的問(wèn)題和使用可以私信聯(lián)系我

** 應(yīng)用內(nèi)共享**

image

** 系統(tǒng) 屏幕共享**

81620466891_.pic_hd.jpg

其他應(yīng)用內(nèi)容屏幕共享

image