### 以項目開發為導向,學習FFMpeg
0.音視頻開發主要包括哪些方面
1.相關技術
什麼是webRTC,使用教程:[https://zhuanlan.zhihu.com/p/33136828]
百科解釋:
什麼是mediasoup
[https://zhuanlan.zhihu.com/p/33618940]
RTP 協議:[https://blog.csdn.net/bripengandre/article/details/2238818]
2.百萬級高併發WebRTC流媒體服務器設計與開發
WebRTC筆記:[https://miaopei.github.io/2019/10/12/WebRTC/mediaserver-01/]
### 一 V4L2庫的使用與原理探討
YUV JPEG MJPG RGB BMP格式優缺點及適用範圍
###二 LCD技術
幀緩衝機制framebuffer:Linux一種底層機制,用以屏蔽不同硬件間的差別,方便顯卡驅動的編寫
Linux屏幕亮度調節
①一般臨時調整屏幕亮度使用這個命令
xbacklight -set 40 #降低屏幕亮度，默認100
也可以使用這個命令，需要root權限
echo 6 > /sys/class/backlight/acpi_video0/brightness #降低屏幕亮度，默認15
如果你的硬件不支持調整亮度的話，可以使用這個命令軟調對比度，並非亮度，效果不是很理想
xrandr --output LVDS1 --brightness 0.6 #降低對比度，默認是1
②修改grub以支持Fn調整屏幕亮度'
sudo vi /etc/default/grub
GRUB_CMDLINE_LINUX="acpi_backlight=vendor"
修改好後保存,然後升級gurb
sudo update-grub
然後用一下命令試試能否調節亮度
sudo su echo 500 > /sys/class/backlight/intel_backlight/brightness
如果屏幕亮度發生變化說明成功，最後執行設置fn按鍵調節
echo 'echo 500 > /sys/class/backlight/intel_backlight/brightness' > /etc/rc.local
### 二 JPEG加解碼
使用步驟:
1.解碼準備(定義解碼對象jpeg_decompress_struct 出錯對象jpeg_error_mgr 申請jpg資源 獲取jpg文件的大小 申請內存空間 讀取jpg文件所有內容到內存 註冊出錯處理jpeg_std_error)
2.開始解碼實現(創建解碼jpeg_create_decompress 直接解碼內存數據jpeg_mem_src 讀文件頭jpeg_read_header 開始解碼jpeg_start_decompress 每次讀取一行解碼數據(rgb值)jpeg_read_scanlines
顯示像素點lcd_draw_point(x,y,color);)
3.完成解碼 jpeg_finish_decompress jpeg_destroy_decompress 釋放資源(取消內存映射 關閉LCD設備)
### tslib 輸入子系統
使用步驟
重點函數與判斷
1.if(EV_ABS == g_ts_event.type)
調用read函數,獲取觸摸屏輸入事件報告 */
count = read(g_ts_fd,&g_ts_event,sizeof(struct input_event));
2./* 檢查當前讀取的事件報告是否讀取完整 */
if(count != sizeof(struct input_event))
{
perror("read error");
return -1;
}
3.延時消抖 觸摸校準
###三 多媒體開發庫SDL
用途:1.輸出視頻時設置視頻模式 創建視頻窗口
Alpha像素混合 Blit位塊傳輸 窗口管理 圖形渲染
目錄筆記
視頻編碼器評測系統：VideoCodecRank(評測標準及公式)
### 四 FFmpeg
ffprobe 工具，主要用來查看多媒體文件或者流媒體信息，在線的視頻信息也能夠快速獲取
1.ffmpeg與ffplay命令集合(播放 (格式)轉換 錄屏 截圖 GIF 縮微圖 編碼 轉碼解密 調屏)
①播放視頻 ffplay -autoexit -fs text.avi
②將一些圖片轉換為視頻(Turn X images to a video sequence)
ffmpeg -f image2 -i image%d.jpg video.mpg
注：This command will transform all the images from the current directory (named
image1.jpg, image2.jpg, etc...) to a video file named video.mpg.
③1把攝像頭的實時視頻錄製下來，存儲為文件(僅限Linux平臺)
ffmpeg -f video4linux -s 320*240 -r 10 -i /dev/video0 test.asf
[更多信息可參考ffmpeg工程組論壇的討論貼：有關ffmpeg的視頻採集]
③2使用ffmpeg錄像屏幕(僅限Linux平臺)
ffmpeg -vcodec mpeg4 -b 1000 -r 10 -g 300 -vd x11:0,0 -s 1024x768 ~/test.avi其中，-vd x11:0,0 指錄製所使用的偏移為 x=0 和 y=0，-s 1024×768 指錄製視頻的大小為 1024×768。錄製的視頻文件為 test.avi，將保存到用戶主目錄中;如果你只想錄製一個應用程序窗口或者桌面上的一個固定區域，那麼可以指定偏移位置和區域大小。使用xwininfo -frame命令可以完成查找上述參數
④截取一張352x240尺寸大小的，格式為jpg的圖片
ffmpeg -i test.asf -y -f image2 -t 0.001 -s 352x240 a.jpg
⑤把視頻的前30幀轉換成一個Animated Gif
ffmpeg -i test.asf -vframes 30 -y -f gif a.gif
⑥截取指定時間的縮微圖,-ss後跟的時間單位為秒
ffmpeg -i test.avi -y -f image2 -ss 8 -t 0.001 -s 350x240 test.jpg
⑧轉換文件為3GP格式
ffmpeg -y -i test.mpeg -bitexact -vcodec h263 -b 128 -r 15 -s 176x144 -acodec aac -ac
2 -ar 22500 -ab 24 -f 3gp test.3gp
轉換文件為3GP格式 v2
ffmpeg -y -i test.wmv -ac 1 -acodec libamr_nb -ar 8000 -ab 12200 -s 176x144 -b 128 -r
15 test.3gp
⑨如何使用 ffmpeg 編碼得到高質量的視頻
ffmpeg.exe -i "D:\\Video\\Fearless\\Fearless.avi" -target film-dvd -s 720x352 -padtop 64
-padbottom 64 -maxrate 7350000 -b 3700000 -sc_threshold 1000000000 -trellis -cgop -g
12 -bf 2 -qblur 0.3 -qcomp 0.7 -me full -dc 10 -mbd 2 -aspect 16:9 -pass 2 -
passlogfile "D:\\Video\\ffmpegencode" -an -f mpeg2video "D:\\Fearless.m2v"
轉換指定格式文件到FLV格式
ffmpeg.exe -i test.mp3 -ab 56 -ar 22050 -b 500 -r 15 -s 320x240 f:\\test.flv
ffmpeg.exe -i test.wmv -ab 56 -ar 22050 -b 500 -r 15 -s 320x240 f:\\test.flv
轉碼解密的VOB
ffmpeg -i snatch_1.vob -f avi -vcodec mpeg4 -b 800 -g 300 -bf 2 -acodec mp3 -ab 128
snatch.avi
上面的命令行將vob的文件轉化成avi文件，mpeg4的視頻和mp3的音頻。注意命令中使用了B幀，所以
mpeg4流是divx5兼容的。GOP大小是300意味著29.97幀頻下每10秒就有INTRA幀。該映射在音頻語言的
DVD轉碼時候尤其有用。
同時編碼到幾種格式並且在輸入流和輸出流之間建立映射
轉換wav到mp2格式
ffmpeg -i /tmp/a.wav -ab 64 /tmp/a.mp2 -ab 128 /tmp/b.mp2 -map 0:0 -map 0:0
上面的命令行轉換一個64Kbits 的a.wav到128kbits的a.mp2 ‘-map file:index’在輸出流的順序上
定義了哪一路輸入流是用於每一個輸出流的。
轉換文件為3GP格式
ffmpeg -i test.avi -y -b 20 -s sqcif -r 10 -acodec amr_wb -ab 23.85 -ac 1 -ar 16000
test.3gp
注：如果要轉換為3GP格式，則ffmpeg在編譯時必須加上–enable-amr_nb –enable-amr_wb，詳細內
容可參考：轉換視頻為3GPP格式
轉換文件為MP4格式（支持iPhone/iTouch）
ffmpeg -y -i input.wmv -f mp4 -async 1-s 480x320 -acodec libfaac -vcodec libxvid
-qscale 7 -dts_delta_threshold 1 output.mp4
ffmpeg -y -i source_video.avi input -acodec libfaac -ab 128000 -vcodec mpeg4 -b
1200000 -mbd 2 -flags +4mv+trell -aic 2 -cmp 2 -subcmp 2 -s 320x180 -title X
final_video.mp4
將一段音頻與一段視頻混合
ffmpeg -i son.wav -i video_origine.avi video_finale.mpg
將一段視頻轉換為DVD格式
ffmpeg -i source_video.avi -target pal-dvd -ps 2000000000 -aspect 16:9
finale_video.mpeg
注：target pal-dvd : Output format ps 2000000000 maximum size for the output file, in
bits (here, 2 Gb) aspect 16:9 : Widescreen
轉換一段視頻為DivX格式
ffmpeg -i video_origine.avi -s 320x240 -vcodec msmpeg4v2 video_finale.avi
Turn a video to X images（將一個視頻轉換為幀圖片）
注：This command will generate the files named image1.jpg, image2.jpg, ...
The following image formats are also availables : PGM, PPM, PAM, PGMYUV, JPEG, GIF,
PNG, TIFF, SGI.
重新調整視頻尺寸大小(僅限Linux平臺)
ffmpeg -vcodec mpeg4 -b 1000 -r 10 -g 300 -i ~/test.avi -s 800×600 ~/test-800-600.avi
使用ffmpeg壓制H.264視頻
ffmpeg -threads 4 -i INPUT -r 29.97 -vcodec libx264 -s 480x272 -flags +loop -cmp
chroma -deblockalpha 0 -deblockbeta 0 -crf 24 -bt 256k -refs 1 -coder 0 -me umh -
me_range 16 -subq 5 -partitions parti4x4+parti8x8+partp8x8 -g 250 -keyint_min 25 -
level 30 -qmin 10 -qmax 51 -trellis 2 -sc_threshold 40 -i_qfactor 0.71 -acodec libfaac
-ab 128k -ar 48000 -ac 2 OUTPUT
注：使用該指令可以壓縮出比較清晰，而且文件轉小的H.264視頻文件
閱讀更多 使徒行者2020 的文章
