qcamera拿到的视频流用ffmpeg进行编解码-QT开发中文网

如果你希望使用Qt的QCamera类获取摄像头视频流，并使用FFmpeg进行编解码，可以按照以下步骤操作：

首先，确保已经安装了FFmpeg库，并在项目中正确配置了相关依赖。
创建一个Qt项目并包含以下头文件：

#include <QCoreApplication>
#include <QCamera>
#include <QCameraViewfinder>
#include <QCameraImageCapture>
#include <QDebug>

extern "C" {
    #include <libavformat/avformat.h>
    #include <libswscale/swscale.h>
}

在main函数中创建相机实例、视图和图像捕获对象：

int main(int argc, char *argv[])
{
    QCoreApplication a(argc, argv);

    // 初始化FFmpeg
    av_register_all();

    // 创建相机实例
    QCamera camera;

    // 创建视图窗口
    QCameraViewfinder viewFinder;
    
    // 将视图设置给相机
    camera.setViewfinder(&viewFinder);
    
    // 创建图像捕获对象
    QCameraImageCapture imageCapture(&camera);

   return a.exec();
}

在需要启动相机时调用camera.start()方法，并监听stateChanged信号来处理状态变化：

QObject::connect(&camera, &QCamera::stateChanged, [&camera](QCamera::State state){
     if (state == QCamera::ActiveState) {
         qDebug() << "摄像头已激活";
         AVCodecContext *codecCtx = nullptr;  // FFmpeg解码器上下文

         // 获取FFmpeg解码器
         AVCodec *codec = avcodec_find_decoder(AV_CODEC_ID_MJPEG);
         if (codec == nullptr) {
             qDebug() << "找不到MJPEG解码器";
             return;
         }

         // 创建解码器上下文
         codecCtx = avcodec_alloc_context3(codec);
         if (codecCtx == nullptr) {
             qDebug() << "无法分配解码器上下文";
             return;
         }
         
         // 打开解码器
         if (avcodec_open2(codecCtx, codec, nullptr) < 0) {
             qDebug() << "无法打开解码器";
             return;
         }

         // 捕获相机帧的信号处理函数
         QObject::connect(&imageCapture, &QCameraImageCapture::imageAvailable, [&camera, codecCtx](int id, const QImage& preview){
              // 将QImage转换为AVFrame
              AVFrame* frame = av_frame_alloc();
              frame->width = preview.width();
              frame->height = preview.height();
              frame->format = AV_PIX_FMT_RGB24;  // 这里使用RGB24格式

              av_image_fill_arrays(frame->data, frame->linesize,
                                   static_cast<const uint8_t *>(preview.bits()),
                                   AV_PIX_FMT_RGB24,
                                   preview.width(), preview.height(), 1);

               // 解码并处理图像帧
               AVPacket packet;
               av_init_packet(&packet);
               packet.data = reinterpret_cast<uint8_t *>(frame->data[0]);
               packet.size = avpicture_get_size(AV_PIX_FMT_RGB24,
                                                codecCtx->width, codecCtx->height);

                int ret = avcodec_send_packet(codecCtx, &packet);
                while (ret >= 0) {
                    ret = avcodec_receive_frame(codecCtx, frame);
                    if (ret == AVERROR(EAGAIN) || ret == AVERROR_EOF) {
                        break;
                    }
                    
                    // 在此处处理解码后的图像帧(frame)
                }

                av_packet_unref(&packet);
                av_frame_free(&frame);
         });

         // 启动图像捕获
         imageCapture.capture();

     } else if (state == QCamera::UnloadedState) {
         qDebug() << "摄像头未加载";
     }
});
camera.start();