OpenGL

CPUでピクセル操作してレイヤーにお絵かきをして、GPU側でそれを合成、っていうのをやる事を想定。
Pixel Buffer Object(PBO)が一番良さそうだけど標準でそれをサポートしてるのはOpenGL ES 3.0 からで Android 4.3以降になるらしい。
OpenGL ES 2.0 でも ARB_pixel_buffer_object か EXT_pixel_buffer_object 拡張が使えるならいけるらしい。

EGLImageを使ったやり方はなんか色々と問題がありそうだけど、古いバージョンのAndroidに対応するとなるとこれを使うしかないっぽい。環境によっては上手く動かせられない地雷原だとか…。