[iOS]利用libyuv 轉(zhuǎn)化視頻分辨率(nv12格式)

libyuv下載地址
鏈接: https://pan.baidu.com/s/1DTInjVivZHQW0PnzJYQK5g 提取碼: cy4b

我也是在網(wǎng)上查找了好多東西,自己試出來可以正常轉(zhuǎn)化將nv12數(shù)據(jù)分辨率的方法,有的地方也并不能完全解釋,但確實(shí)可行,僅供參考吧,也是自己記錄下,因?yàn)檫@個(gè)過程真的好辛苦,從找到nv12轉(zhuǎn)化分辨率到將yuv轉(zhuǎn)化成CVPixelBufferRef,再到CMSampleBufferRef.

過程:得到CMSampleBufferRef(此處得到的是420f,也是nv12,也是kCVPixelFormatType_420YpCbCr8BiPlanarFullRange),解析得到nv12格式y(tǒng)uv數(shù)據(jù).利用libyuv ,先將nv12轉(zhuǎn)化成I420,通過I420轉(zhuǎn)化分辨率,再將I420轉(zhuǎn)化成nv12,用到的libyuv的方法有三個(gè):NV12ToI420,I420Scale,I420ToNV12.
首先我運(yùn)用的場(chǎng)景是通過系統(tǒng)的錄屏方法獲取到的CMSampleBufferRef,得到的視頻流分辨率是1080*1920,但是我需要的是720 *1280.

[[RPScreenRecorder sharedRecorder] startCaptureWithHandler:^(CMSampleBufferRef  _Nonnull sampleBuffer, RPSampleBufferType bufferType, NSError * _Nullable error) {
            
            if (bufferType == RPSampleBufferTypeVideo && sampleBuffer != nil) {
                
                CVPixelBufferRef pixel =[self convertVideoSmapleBufferToYuvData:sampleBuffer];
                CMSampleBufferRef sample = [self pixelBufferToSampleBuffer:pixel];
                [self setwangyiBuffer:sample];
            }
        } completionHandler:^(NSError * _Nullable error) {}];

其中 [[RPScreenRecorder sharedRecorder] startCaptureWithHandler:^(CMSampleBufferRef _Nonnull sampleBuffer, RPSampleBufferType bufferType, NSError * _Nullable error) 是系統(tǒng)的錄屏方法,可以直接得到錄屏數(shù)據(jù)的視頻流,CVPixelBufferRef pixel =[self convertVideoSmapleBufferToYuvData:sampleBuffer];
是我自己轉(zhuǎn)化調(diào)用的方法其中shareSWidth = 720;
shareSHeight = 1280;

//轉(zhuǎn)化
-(CVPixelBufferRef)convertVideoSmapleBufferToYuvData:(CMSampleBufferRef) videoSample{
    
//    1.
    //CVPixelBufferRef是CVImageBufferRef的別名,兩者操作幾乎一致腻异。
    //獲取CMSampleBuffer的圖像地址
    CVImageBufferRef pixelBuffer = CMSampleBufferGetImageBuffer(videoSample);
    //表示開始操作數(shù)據(jù)
    CVPixelBufferLockBaseAddress(pixelBuffer, 0);
    //圖像寬度(像素)
    size_t pixelWidth = CVPixelBufferGetWidth(pixelBuffer);
    //圖像高度(像素)
    size_t pixelHeight = CVPixelBufferGetHeight(pixelBuffer);
    //獲取CVImageBufferRef中的y數(shù)據(jù)
    uint8_t *y_frame = (unsigned char *)CVPixelBufferGetBaseAddressOfPlane(pixelBuffer, 0);
    //獲取CMVImageBufferRef中的uv數(shù)據(jù)
    uint8_t *uv_frame =(unsigned char *) CVPixelBufferGetBaseAddressOfPlane(pixelBuffer, 1);
    
    //y stride
    size_t plane1_stride = CVPixelBufferGetBytesPerRowOfPlane (pixelBuffer, 0);
    //uv stride
    size_t plane2_stride = CVPixelBufferGetBytesPerRowOfPlane (pixelBuffer, 1);
    //y_size
    size_t plane1_size = plane1_stride * CVPixelBufferGetHeightOfPlane(pixelBuffer, 0);
    //uv_size
    size_t plane2_size = CVPixelBufferGetBytesPerRowOfPlane (pixelBuffer, 1) * CVPixelBufferGetHeightOfPlane(pixelBuffer, 1);
    //yuv_size(內(nèi)存空間)
    size_t frame_size = plane1_size + plane2_size;
    
    //開辟frame_size大小的內(nèi)存空間用于存放轉(zhuǎn)換好的i420數(shù)據(jù)
    uint8* buffer = (unsigned char *)malloc(frame_size);
    //buffer為這段內(nèi)存的首地址,plane1_size代表這一幀中y數(shù)據(jù)的長(zhǎng)度
    uint8* dst_u = buffer + plane1_size;
    //dst_u為u數(shù)據(jù)的首地,plane1_size/4為u數(shù)據(jù)的長(zhǎng)度
    uint8* dst_v = dst_u + plane1_size/4;
    
    
    // Let libyuv convert
    libyuv::NV12ToI420(y_frame,plane1_stride,
             uv_frame, plane2_stride,
               buffer, plane1_stride,
            dst_u,plane2_stride/2,
              dst_v, plane2_stride/2,
               pixelWidth, pixelHeight);
    
    
//    2
    //scale-size
    int scale_yuvBufSize = shareSWidth * shareSHeight * 3 / 2;
    //uint8_t* scale_yuvBuf= new uint8_t[scale_yuvBufSize];
    uint8* scale_yuvBuf = (unsigned char *)malloc(scale_yuvBufSize);

    //scale-stride
    const int32 scale_uv_stride = (shareSWidth + 1) / 2;

    //scale-length
    const int scale_y_length = shareSWidth * shareSHeight;
    int scale_uv_length = scale_uv_stride * ((shareSWidth+1) / 2);

    unsigned char *scale_Y_data_Dst = scale_yuvBuf;
    unsigned char *scale_U_data_Dst = scale_yuvBuf + scale_y_length;
    unsigned char *scale_V_data_Dst = scale_U_data_Dst + scale_y_length/4;


    libyuv::I420Scale(buffer, plane1_stride, dst_u, plane2_stride/2, dst_v, plane2_stride/2, pixelWidth, pixelHeight, scale_Y_data_Dst, shareSWidth,
                      scale_U_data_Dst, scale_uv_stride,
                      scale_V_data_Dst, scale_uv_stride,
                      shareSWidth, shareSHeight,
                      libyuv::kFilterNone);


//    3.
    uint8 *dst_y = (uint8 *)malloc((shareSWidth * shareSHeight * 3) >> 1);
    int dst_Stride_Y = shareSWidth;
    uint8 *dst_uv = dst_y + shareSWidth*shareSHeight;
    int dst_Stride_uv = shareSWidth/2;

    libyuv::I420ToNV12(scale_Y_data_Dst, shareSWidth,
                       scale_U_data_Dst, scale_uv_stride,
                       scale_V_data_Dst, scale_uv_stride,dst_y, dst_Stride_Y, dst_uv, dst_Stride_Y,shareSWidth, shareSHeight);

    CVPixelBufferUnlockBaseAddress(pixelBuffer, 0);
    free(buffer);
    free(scale_yuvBuf);

    //轉(zhuǎn)化
    NSDictionary *pixelAttributes = @{(id)kCVPixelBufferIOSurfacePropertiesKey : @{}};
    CVPixelBufferRef pixelBuffer1 = NULL;
    CVReturn result = CVPixelBufferCreate(kCFAllocatorDefault,
        shareSWidth,shareSHeight,kCVPixelFormatType_420YpCbCr8BiPlanarFullRange,
                                          (__bridge CFDictionaryRef)pixelAttributes,&pixelBuffer1);

    CVPixelBufferLockBaseAddress(pixelBuffer1, 0);
    uint8_t *yDestPlane = (uint8*)CVPixelBufferGetBaseAddressOfPlane(pixelBuffer1, 0);
    memcpy(yDestPlane, dst_y, shareSWidth * shareSHeight);
    uint8_t *uvDestPlane = (uint8*)CVPixelBufferGetBaseAddressOfPlane(pixelBuffer1, 1);
    memcpy(uvDestPlane, dst_uv, shareSWidth * shareSHeight/2);
    if (result != kCVReturnSuccess) {
        NSLog(@"Unable to create cvpixelbuffer %d", result);
    }
    CVPixelBufferUnlockBaseAddress(pixelBuffer1, 0);
    free(dst_y);
//    CVPixelBufferRelease(pixelBuffer1);

    return pixelBuffer1;
}

時(shí)間戳
-(CMSampleBufferRef)pixelBufferToSampleBuffer:(CVPixelBufferRef)pixelBuffer
{

    CMSampleBufferRef sampleBuffer;
    CMTime frameTime = CMTimeMakeWithSeconds([[NSDate date] timeIntervalSince1970], 1000000000);
    CMSampleTimingInfo timing = {frameTime, frameTime, kCMTimeInvalid};
    CMVideoFormatDescriptionRef videoInfo = NULL;
    CMVideoFormatDescriptionCreateForImageBuffer(NULL, pixelBuffer, &videoInfo);
    
    OSStatus status = CMSampleBufferCreateForImageBuffer(kCFAllocatorDefault, pixelBuffer, true, NULL, NULL, videoInfo, &timing, &sampleBuffer);
    if (status != noErr) {
        NSLog(@"Failed to create sample buffer with error %zd.", status);
    }
    CVPixelBufferRelease(pixelBuffer);
    if(videoInfo)
    CFRelease(videoInfo);
    
    return sampleBuffer;
}

參考鏈接
https://blog.csdn.net/sinat_36684217/article/details/75117920
http://www.reibang.com/p/050234c5fff2
http://www.reibang.com/p/68e05ad85490
http://www.reibang.com/p/dac9857b34d0

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末颈走,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子攻柠,更是在濱河造成了極大的恐慌,老刑警劉巖后裸,帶你破解...
    沈念sama閱讀 206,968評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件微驶,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡因苹,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門凶杖,熙熙樓的掌柜王于貴愁眉苦臉地迎上來智蝠,“玉大人腾么,你說我怎么就攤上這事解虱∶兀” “怎么了?”我有些...
    開封第一講書人閱讀 153,220評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵艰匙,是天一觀的道長(zhǎng)抹恳。 經(jīng)常有香客問我,道長(zhǎng)健霹,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,416評(píng)論 1 279
  • 正文 為了忘掉前任糖埋,我火速辦了婚禮瞳别,結(jié)果婚禮上杭攻,老公的妹妹穿的比我還像新娘。我一直安慰自己兆解,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,425評(píng)論 5 374
  • 文/花漫 我一把揭開白布埠巨。 她就那樣靜靜地躺著衣撬,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上甜无,一...
    開封第一講書人閱讀 49,144評(píng)論 1 285
  • 那天哥遮,我揣著相機(jī)與錄音眠饮,去河邊找鬼铜邮。 笑死,一個(gè)胖子當(dāng)著我的面吹牛松蒜,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播召娜,決...
    沈念sama閱讀 38,432評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼惊楼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了雅倒?” 一聲冷哼從身側(cè)響起弧可,我...
    開封第一講書人閱讀 37,088評(píng)論 0 261
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎殖演,沒想到半個(gè)月后年鸳,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,586評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡彼棍,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,028評(píng)論 2 325
  • 正文 我和宋清朗相戀三年座硕,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片华匾。...
    茶點(diǎn)故事閱讀 38,137評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡蜘拉,死狀恐怖萨西,靈堂內(nèi)的尸體忽然破棺而出谎脯,到底是詐尸還是另有隱情,我是刑警寧澤源梭,帶...
    沈念sama閱讀 33,783評(píng)論 4 324
  • 正文 年R本政府宣布废麻,位于F島的核電站,受9級(jí)特大地震影響脑溢,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜屑彻,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,343評(píng)論 3 307
  • 文/蒙蒙 一社牲、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧搏恤,春花似錦、人聲如沸熟空。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽迈喉。三九已至,卻和暖如春挨摸,著一層夾襖步出監(jiān)牢的瞬間岁歉,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評(píng)論 1 262
  • 我被黑心中介騙來泰國(guó)打工澈圈, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留帆啃,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 45,595評(píng)論 2 355
  • 正文 我出身青樓努潘,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親疯坤。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,901評(píng)論 2 345