谈谈Android中的SurfaceTexture
2015.7.2更新
由于很多人要代码,我把代码下载链接放在这里了。不过还是要说一下,surfaceTexture和OpenGL ES结合才能发挥出它最大的效果,我这种写法只是我自己的想法,还有很多种解决方法,如果大家学习一下OpenGL ES,会发现更多有意思的东西。
SurfaceTexture是从Android3.0(API 11)加入的一个新类。这个类跟SurfaceView很像,可以从camera preview或者video decode里面获取图像流(image stream)。但是,和SurfaceView不同的是,SurfaceTexture在接收图像流之后,不需要显示出来。有做过Android camera开发的人都知道,比较头疼的一个问题就是,从camera读取到的预览(preview)图像流一定要输出到一个可见的(Visible)SurfaceView上,然后通过Camera.PreviewCallback的public void onPreviewFrame(byte[] data, Camera camera)函数来获得图像帧数据的拷贝。这就存在一个问题,比如我希望隐藏摄像头的预览图像或者对每一帧进行一些处理再显示到手机显示屏上,那么在Android3.0之前是没有办法做到的,或者说你需要用一些小技巧,比如用其他控件把SurfaceView给挡住,注意这个显示原始camera图像流的SurfaceView其实是依然存在的,也就是说被挡住的SurfaceView依然在接收从camera传过来的图像,而且一直按照一定帧率去刷新,这是消耗cpu的,而且如果一些参数设置的不恰当,后面隐藏的SurfaceView有可能会露出来,因此这些小技巧并不是好办法。但是,有了SurfaceTexture之后,就好办多了,因为SurfaceTexture不需要显示到屏幕上,因此我们可以用SurfaceTexture接收来自camera的图像流,然后从SurfaceTexture中取得图像帧的拷贝进行处理,处理完毕后再送给另一个SurfaceView用于显示即可。
在我的应用场景中,我需要从camera读取图像流,然后对其处理,最后将处理结果显示到手机屏幕上。因此我写了一个GameDisplay类用于处理以上所有事务,而在MainActivity中,只需要创建一个GameDisplay类的实例并且初始化即可。
package com.song.camgame; import java.io.IOException;
import java.util.List;
import java.util.Timer;
import java.util.TimerTask; import android.app.Activity;
import android.content.Context;
import android.graphics.Bitmap;
import android.graphics.Canvas;
import android.graphics.ImageFormat;
import android.graphics.Rect;
import android.graphics.SurfaceTexture;
import android.hardware.Camera;
import android.hardware.Camera.Size;
import android.util.Log;
import android.view.SurfaceHolder;
import android.view.SurfaceView; public class GameDisplay extends SurfaceView implements SurfaceHolder.Callback,
Camera.PreviewCallback{
public final static String TAG="GameDisplay"; private static final int MAGIC_TEXTURE_ID = 10;
public static final int DEFAULT_WIDTH=800;
public static final int DEFAULT_HEIGHT=480;
public static final int BLUR = 0;
public static final int CLEAR = BLUR + 1;
//public static final int PAUSE = PLAY + 1;
//public static final int EXIT = PAUSE + 1;
public SurfaceHolder gHolder;
public SurfaceTexture gSurfaceTexture;
public Camera gCamera;
public byte gBuffer[];
public int textureBuffer[];
public ProcessThread gProcessThread;
private int bufferSize;
private Camera.Parameters parameters;
public int previewWidth, previewHeight;
public int screenWidth, screenHeight;
public Bitmap gBitmap;
private Rect gRect;
// timer
private Timer sampleTimer;
private TimerTask sampleTask; public GameDisplay(Context context,int screenWidth,int screenHeight) {
super(context);
gHolder=this.getHolder();
gHolder.addCallback(this);
gHolder.setType(SurfaceHolder.SURFACE_TYPE_PUSH_BUFFERS);
gSurfaceTexture=new SurfaceTexture(MAGIC_TEXTURE_ID);
this.screenWidth=screenWidth;
this.screenHeight=screenHeight;
gRect=new Rect(0,0,screenWidth,screenHeight);
Log.v(TAG, "GameDisplay initialization completed");
} @Override
public void surfaceChanged(SurfaceHolder holder, int format, int width,
int height) {
Log.v(TAG, "GameDisplay surfaceChanged");
parameters = gCamera.getParameters();
List<Size> preSize = parameters.getSupportedPreviewSizes();
previewWidth = preSize.get(0).width;
previewHeight = preSize.get(0).height;
for (int i = 1; i < preSize.size(); i++) {
double similarity = Math
.abs(((double) preSize.get(i).height / screenHeight)
- ((double) preSize.get(i).width / screenWidth));
if (similarity < Math.abs(((double) previewHeight / screenHeight)
- ((double) previewWidth / screenWidth))) {
previewWidth = preSize.get(i).width;
previewHeight = preSize.get(i).height;
}
}
gBitmap= Bitmap.createBitmap(previewWidth, previewHeight, Bitmap.Config.ARGB_8888);
parameters.setPreviewSize(previewWidth, previewHeight);
gCamera.setParameters(parameters);
bufferSize = previewWidth * previewHeight;
textureBuffer=new int[bufferSize];
bufferSize = bufferSize * ImageFormat.getBitsPerPixel(parameters.getPreviewFormat()) / 8;
gBuffer = new byte[bufferSize];
gCamera.addCallbackBuffer(gBuffer);
gCamera.setPreviewCallbackWithBuffer(this);
gCamera.startPreview();
//gProcessThread = new ProcessThread(surfaceView,handler,null,previewWidth,previewHeight);
//processThread.start();
} @Override
public void surfaceCreated(SurfaceHolder holder) {
Log.v(TAG, "GameDisplay surfaceCreated");
if (gCamera == null) {
gCamera = Camera.open();
}
gCamera.setPreviewTexture(gSurfaceTexture);
//sampleStart();
} @Override
public void surfaceDestroyed(SurfaceHolder holder) {
Log.v(TAG, "GameDisplay surfaceDestroyed");
//gProcessThread.isRunning=false;
//sampleTimer.cancel();
//sampleTimer = null;
//sampleTask.cancel();
//sampleTask = null;
gCamera.stopPreview();
gCamera.release();
} @Override
public void onPreviewFrame(byte[] data, Camera camera) {
Log.v(TAG, "GameDisplay onPreviewFrame");
//gProcessThread.raw_data=data;
camera.addCallbackBuffer(gBuffer);
for(int i=0;i<textureBuffer.length;i++)
textureBuffer[i]=0xff000000|data[i];
gBitmap.setPixels(textureBuffer, 0, previewWidth, 0, 0, previewWidth, previewHeight);
synchronized (gHolder)
{
Canvas canvas = this.getHolder().lockCanvas();
canvas.drawBitmap(gBitmap, null,gRect, null);
//canvas.drawBitmap(textureBuffer, 0, screenWidth, 0, 0, screenWidth, screenHeight, false, null);
this.getHolder().unlockCanvasAndPost(canvas);
} } public void sampleStart() {
Log.v(TAG, "GameDisplay sampleStart");
sampleTimer = new Timer(false);
sampleTask = new TimerTask() {
@Override
public void run() {
gProcessThread.timer=true;
}
};
sampleTimer.schedule(sampleTask,0, 80);
}
}
以上程序中115-130行是最重要的部分,data是从SurfaceTexture获得的camera图像帧的拷贝,119-121行对其进行了简单的处理,122-128行将处理过的图像数据传递给负责显示的SurfaceView并显示出来。
MainActivity对GameDisplay的调用如下:
//声明
private GameDisplay gameDisplay;
//初始化
gameDisplay.setVisibility(SurfaceView.VISIBLE);
DisplayMetrics dm = getResources().getDisplayMetrics();
screenWidth = dm.widthPixels;
screenHeight = dm.heightPixels;
gameDisplay= new GameDisplay(this,dm.widthPixels,dm.heightPixels);
//加入到当前activity的layout中
FrameLayout root = (FrameLayout) findViewById(R.id.root);
root.addView(gameDisplay,0);
谈谈Android中的SurfaceTexture的更多相关文章
- 谈谈Android中的Rect类——奇葩的思维
最近在工作中遇到了一些问题,总结下来就是Android中Rect这个类造成的.不得不说,不知道Android SDK的开发人员是怎么想的, 这个类设计的太奇葩了.首先介绍一下Rect类:Rect类主要 ...
- (转)谈谈Android中的Rect类——奇葩的思维
最近在工作中遇到了一些问题,总结下来就是Android中Rect这个类造成的.不得不说,不知道Android SDK的开发人员是怎么想的, 这个类设计的太奇葩了.首先介绍一下Rect类:Rect类主要 ...
- Android中线程和线程池
我们知道线程是CPU调度的最小单位.在Android中主线程是不能够做耗时操作的,子线程是不能够更新UI的.在Android中,除了Thread外,扮演线程的角色有很多,如AsyncTask,Inte ...
- 访何红辉:谈谈Android源码中的设计模式
最近Android 6.0版本的源代码开放下载,刚好分析Android源码的技术书籍<Android源码设计模式解析与实战>上市,我们邀请到它的作者何红辉,来谈谈Android源码中的设计 ...
- Android 5.0(Lollipop)中的SurfaceTexture,TextureView, SurfaceView和GLSurfaceView
SurfaceView, GLSurfaceView, SurfaceTexture以及TextureView是Android当中名字比较绕,关系又比较密切的几个类.本文基于Android 5.0(L ...
- 谈谈对Android中的消息机制的理解
Android中的消息机制主要由Handler.MessageQueue.Looper三个类组成,他们的主要作用是 Handler负责发送.处理Message MessageQueue负责维护Mess ...
- Android中使用ImageViewSwitcher实现图片切换轮播导航效果
前面写过了使用ViewFlipper和ViewPager实现屏幕中视图切换的效果(ViewPager未实现轮播)附链接: Android中使用ViewFlipper实现屏幕切换 Android中使用V ...
- Android中后台的劳动者“服务”
前言 作为四大组件之一的Service,想必不少开发者都是了解的,那具体熟悉吗?是不是对Service中的每个知识点是否了解,它与Activity的关系又是什么样的,我们所理解的后台服务跟Servic ...
- 谈谈Android 6.0运行时权限理解
前言 谷歌在2015年8月份时候,发布了Android 6.0版本,代号叫做“棉花糖”(Marshmallow ),其中的很大的一部分变化,是在用户权限授权上,或许是感觉之前默认授权的不合理,现在6. ...
随机推荐
- HTTP请求与响应报文详解
如图所示,这是客户端往服务器发送请求时的报文: 一般来说,将报文分成三个部分,请求行.请求头.请求体 如图,请求行包括三部分内容 1.请求方法,在HTTP里的请求方法种类较多,但就移动端开发来说,常用 ...
- Jenkins + Django 完整实战,细化到每一步操作
Reference: http://blog.csdn.net/GitChat/article/details/78271099?locationNum=3&fps=1 [不要错过文末彩蛋] ...
- (转载)跟我一起学习VIM - The Life Changing Editor
原文: http://ju.outofmemory.cn/entry/79671 前两天同事让我在小组内部分享一下VIM,于是我花了一点时间写了个简短的教程.虽然准备有限,但分享过程中大家大多带着一种 ...
- Drozer快速使用指南
1.简介: Drozer是一款用于测试android应用程序漏洞的安全评估工具,能够发现多种类型的安全的漏洞,免费版本的相关资源下载地址: https://www.mwrinfosecurity.co ...
- git将一个分支的某个文件合并到当前分支
有时在开发的feature中,整个分支的功能并没有完成开发完成,但是,有几个修改的基础文件需要合并到develop中,这个时候的操作步骤为: git checkout develop //切换 ...
- Sphinx/Coreseek 4.1 执行 buildconf.sh 报错,无法生成configure文件
参考的网址: http://blog.csdn.net/jcjc918/article/details/39032689 错误现象: 执行 buildconf.sh 报错,无法生成configure文 ...
- C语言 · 生物芯片
标题:生物芯片 X博士正在研究一种生物芯片.博士在芯片中设计了 n 个微型光源,每个光源操作一次就会改变其状态,即:点亮转为关闭,或关闭转为点亮. 这些光源的编号从 1 到 n,开始的时候所有光源都是 ...
- Android——ViewPager滑动背景渐变(自定义view,ViewPager)
效果: ActivityBackgroundImage,java(自定义视图) package com.example.chenshuai.test322; import android.conten ...
- Spark 介绍(基于内存计算的大数据并行计算框架)
Spark 介绍(基于内存计算的大数据并行计算框架) Hadoop与Spark 行业广泛使用Hadoop来分析他们的数据集.原因是Hadoop框架基于一个简单的编程模型(MapReduce),它支持 ...
- 搭建自己的挂Q平台
准备工作: 在前篇[分享]免费建立自己的站点里面介绍了怎么申请免费域名和空间. 在这里[随记]Q号解除限制一波三折有我被挂Q工具坑苦的经历. 在网上(出处不明了,下载的包太多,非CSDN)下载到的免费 ...