基于Android3.x/Google TV/SDK的视频处理：视频帧到SurfaceTexture/OpenGL/GLSL

Question

在花了一段时间之后，问一下也许会更好。谢谢帮忙，伙计们！

问题

null

c）我已经将视频帧呈现到GLView/GLRenderer中，但我不是为了通过GLSL更改帧而抓取帧。这似乎不起作用。但我需要可访问的GLES/GLSL纹理与视频数据一起用于视频处理：

MainActivity类：

public void onCreate(Bundle state) {
    super.onCreate(state);

    m_View = new GLSimpleView(this);
    setContentView(m_View);

    m_Holder = m_View.getHolder();
    m_Holder.addCallback(this);
    m_Holder.setType(SurfaceHolder.SURFACE_TYPE_PUSH_BUFFERS);
}

GLSimpleView类：

public GLSimpleView(Context context) {
    super(context);

    m_Renderer = new GLTextureRenderer(context); 
    this.setRenderer(m_Renderer);
}

int[] textures = new int[1];
GLES20.glGenTextures(1, textures, 0);

m_SurfaceTexture = textures[0];
GLES20.glBindTexture(GL_TEXTURE_EXTERNAL_OES, mTextureID);

GLES20.glTexParameterf(GL_TEXTURE_EXTERNAL_OES, GLES20.GL_TEXTURE_MIN_FILTER, GLES20.GL_NEAREST);
GLES20.glTexParameterf(GL_TEXTURE_EXTERNAL_OES, GLES20.GL_TEXTURE_MAG_FILTER, GLES20.GL_LINEAR);

GLES20.glTexParameteri(GL_TEXTURE_EXTERNAL_OES, GLES20.GL_TEXTURE_WRAP_S, GLES20.GL_CLAMP_TO_EDGE);
GLES20.glTexParameteri(GL_TEXTURE_EXTERNAL_OES, GLES20.GL_TEXTURE_WRAP_T, GLES20.GL_CLAMP_TO_EDGE);

m_Surface = new SurfaceTexture(m_SurfaceTexture);
m_Surface.setOnFrameAvailableListener(this);

// THIS ONE DOESN'T WORK WITH ANDROID 3.x!
// HOW TO BIND m_Surface TO m_MediaPlayer?

//Surface surface = new Surface(m_Surface);
//m_MediaPlayer.setSurface(surface);
//surface.release();

视频到GLView（通过GLSL没有纹理访问！）：在GLSurfaceView而不是SurfaceView中播放视频

Android 4.x SDK VideoSurfaceTexture示例（不兼容3.2！）：http://source-android.frandroid.com/cts/tests/src/Android/media/cts/videoSurfaceView.java

Android MediaPlayer（在Android 3.x中不支持setSurface（）！）：http://developer.Android.com/reference/Android/media/media/MediaPlayer.html

因此，主要的问题仍然是：如何使用Android3.x访问和操作视频帧？也许是另一种解决方法？花了太多时间，我错过了什么吗？考虑到谷歌电视上根本没有NDK支持，如果我们试图操纵视频数据，我们会受到很大的限制。

Answer 1

Megha很好心帮我调查这件事。我们不支持这在谷歌电视为ARM。这在我们现在的SoC（片上系统）是不可能的。