opengles+mediaCodec录制MP4

Question

在使用opengl es+mediacodec录制MP4文件的时候，在视频流上添加水印，为什么水印的纹理格式设置为GL_TEXTURE_EXTERNAL_OES，会导致MP4文件只有水印的画面，没有视频的画面，而改成了GL_TEXTURE_2D则正常？

Answer 1

让【道友老李】来帮你解答，本回答参考gpt编写，并整理提供，如果还有疑问可以点击头像关注私信或评论。

如果答案让您满意，请采纳、关注，非常感谢！

在使用OpenGL ES结合MediaCodec录制MP4文件时，水印纹理的格式设置对于最终视频的效果至关重要。下面将为您详细解释为什么采用`GL_TEXTURE_EXTERNAL_OES`作为水印的纹理格式会导致MP4文件只呈现水印，且没有视频内容。

1. 背景知识

• GL_TEXTURE_EXTERNAL_OES: 这是一个专为与外部图像源（如相机或视频播放）交互而设计的纹理格式。使用此格式时，OpenGL ES会直接访问其他媒体源的纹理数据。
• GL_TEXTURE_2D: 标准的二维纹理格式，可以从应用程序的内存中加载和使用纹理数据。

2. 问题原因

当您将水印的纹理格式设置为GL_TEXTURE_EXTERNAL_OES时，您实际上是在告诉OpenGL ES使用外部的YUV纹理，以便与视频源或相机输入进行兼容。这意味着OpenGL ES会期望这个纹理由MediaCodec或其他相机机制提供。这通常用于在实时视频流中处理数据。 如果您的水印是使用GL_TEXTURE_EXTERNAL_OES生成的，但没有提供指向有效视频来源的上下文或绑定（比如相机输入），OpenGL将不会正确渲染其他视频内容，而只会渲染水印，导致最终输出的MP4文件中仅包含水印的画面，完全忽略了其他视频内容。

3. 解决方法

为了确保您的MP4文件包含正确的水印和视频流，您可以使用GL_TEXTURE_2D格式来创建水印纹理。这使得应用程序可以直接在内存中处理纹理数据，而不依赖于外部资源的有效性。

4. 代码示例

以下是使用GL_TEXTURE_2D纹理格式添加水印的基础示例：

// 创建水印纹理
GLuint watermarkTexture;
glGenTextures(1, &watermarkTexture);
glBindTexture(GL_TEXTURE_2D, watermarkTexture);
// 加载水印图像数据（这里省略具体加载代码）
unsigned char *watermarkData; // 水印图像数据
int width, height; // 水印的宽高
glTexImage2D(GL_TEXTURE_2D, 0, GL_RGBA, width, height, 0, GL_RGBA, GL_UNSIGNED_BYTE, watermarkData);
glTexParameteri(GL_TEXTURE_2D, GL_TEXTURE_MIN_FILTER, GL_LINEAR);
glTexParameteri(GL_TEXTURE_2D, GL_TEXTURE_MAG_FILTER, GL_LINEAR);
glBindTexture(GL_TEXTURE_2D, 0);
// 录制视频时绑定和渲染水印纹理
glBindTexture(GL_TEXTURE_2D, watermarkTexture);
// 渲染水印的相应OpenGL代码

5. 结论

综上所述，使用适当的纹理格式对确保视频内容与水印正确合成至关重要。在处理OpenGL ES和MediaCodec时，确保使用GL_TEXTURE_2D来处理水印纹理，这样可以避免因使用GL_TEXTURE_EXTERNAL_OES引发的渲染问题，确保最终生成的MP4文件中包含预期的水印和视频内容。