Question

我在C程序中使用ffmpeg消耗音频文件和视频文件。我正在修改音频和视频数据。在下面的代码中，我将这两个流都写入了自己的文件。如何将两个流都写入同一文件？

#include <math.h>
#include <stdint.h>
#include <stdio.h>

// Video resolution
#define W 1280
#define H 720

// Allocate a buffer to store one video frame
unsigned char video_frame[H][W][3] = {0};

int main()
{
    // Audio pipes
    FILE *audio_pipein = popen("ffmpeg -i data/daft-punk.mp3 -f s16le -ac 1 -", "r");
    FILE *audio_pipeout = popen("ffmpeg -y -f s16le -ar 44100 -ac 1 -i - out/daft-punk.mp3", "w");

    // Video pipes
    FILE *video_pipein = popen("ffmpeg -i data/daft-punk.mp4 -f image2pipe -vcodec rawvideo -pix_fmt rgb24 -", "r");
    FILE *video_pipeout = popen("ffmpeg -y -f rawvideo -vcodec rawvideo -pix_fmt rgb24 -s 1280x720 -r 25 -i - -f mp4 -q:v 5 -an -vcodec mpeg4 out/daft-punk.mp4", "w");

    // Audio vars
    int16_t audio_sample;
    int audio_count;
    int audio_n = 0;

    // Video vars
    int x = 0;
    int y = 0;
    int video_count = 0;

    // Read, modify, and write one audio_sample and video_frame at a time
    while (1)
    {
        // Audio
        audio_count = fread(&audio_sample, 2, 1, audio_pipein); // read one 2-byte audio_sample
        if (audio_count == 1)
        {
            ++audio_n;
            audio_sample = audio_sample * sin(audio_n * 5.0 * 2 * M_PI / 44100.0);
            fwrite(&audio_sample, 2, 1, audio_pipeout);
        }

        // Video
        video_count = fread(video_frame, 1, H * W * 3, video_pipein); // Read a frame from the input pipe into the buffer
        if (video_count == H * W * 3)                                 // Only modify and write if frame exists
        {
            for (y = 0; y < H; ++y)     // Process this frame
                for (x = 0; x < W; ++x) // Invert each colour component in every pixel
                {
                    video_frame[y][x][0] = 255 - video_frame[y][x][0]; // red
                    video_frame[y][x][1] = 255 - video_frame[y][x][1]; // green
                    video_frame[y][x][2] = 255 - video_frame[y][x][2]; // blue
                }
            fwrite(video_frame, 1, H * W * 3, video_pipeout); // Write this frame to the output pipe
        }

        // Break if both complete
        if (audio_count != 1 && video_count != H * W * 3)
            break;
    }

    // Close audio pipes
    pclose(audio_pipein);
    pclose(audio_pipeout);

    // Close video pipes
    fflush(video_pipein);
    fflush(video_pipeout);
    pclose(video_pipein);
    pclose(video_pipeout);

    return 0;
}

我以this article的代码为基础。

谢谢！

Answer 1

这称为 muxing （多路复用=分享的花哨词）。
在这里（下面的链接），您会发现易于遵循的示例：打开并写入在单个流/文件中混合的流。您还将注意到该示例使用av_interleaved_write_frame而不是fwrite。尤其要检查remuxing.c。

示例：
https://github.com/FFmpeg/FFmpeg/tree/master/doc/examples

Api参考：
https://www.ffmpeg.org/doxygen/trunk/index.html

如何使用FFMPEG和C将音频和视频写入同一文件？

1 个答案: