应用程序简要说明:
- 我有Cordova/Ionic应用程序和自定义Cordova插件用于本机代码执行。
- 插件包含单独的 CameraActivity(扩展 FragmentActivity)以与 Camera(基于 Camera2Basic 示例的代码部分)一起使用。
- 启动时,活动显示AnaliseFragment,其中应用程序捕获每个相机帧,并通过反向线程将图像传递到分析器。
执行步骤如下:
- 用户按下科尔多瓦 UI 上的按钮
- Cordova通过cordova.exec(..) 执行原生插件方法
- 原生插件通过cordova.startActivityForResult(..) 启动CameraActivity for result(..)
- 相机活动显示分析片段
- AnaliseFragment 使用两个表面启动相机捕获会话:第一个显示在 TextureView 上,第二个由 ImageAnaliser 分析。
问题:
很少和随机的 UI 停止对用户和未在 UI 线程上执行的可运行对象做出反应。同时,后台线程继续正常工作:相机输出在TextureView上可见,ImageAnaliser继续从相机接收图像。
有人有任何建议如何查找/调试此类行为的原因吗?或者任何想法会导致这种情况?
我已经尝试过:
- 记录相机活动/分析片段的每个生命周期事件 = 应用程序正常状态和 ANR 之间没有调用
- 添加唤醒锁以保持科尔多瓦主活动活动活着 = 没有帮助
- log(trace) AnalilseFragment 和 ImageAnaliser 中的每个方法 = 没有可疑之处
以下是 AnaliseFragment 的简化代码:
public class AnaliseFragment extends Fragment {
private HandlerThread mBackgroundThread;
private Handler mBackgroundHandler;
private ImageAnalyser mImageAnalyser;
// listener is attached to camera capture session and receives every frame
private final ImageReader.OnImageAvailableListener mOnImageAvailableListener
= new ImageReader.OnImageAvailableListener() {
@Override
public void onImageAvailable(ImageReader reader) {
Image nextImage = reader.acquireLatestImage();
mBackgroundHandler.post(() ->
try {
mImageAnalyser.AnalizeNextImage(mImage);
}
finally {
mImage.close();
}
);
}
};
@Override
public void onViewCreated(final View view, Bundle savedInstanceState) {
mImageAnalyser = new ImageAnalyser();
mImageAnalyser.onResultAvailable(boolResult -> {
// Runnable posted, but never executed
new Handler(Looper.getMainLooper()).post(() -> reportToActivityAndUpdateUI(boolResult));
});
}
@Override
public void onResume() {
super.onResume();
startBackgroundThread();
}
@Override
public void onPause() {
stopBackgroundThread();
super.onPause();
}
private void startBackgroundThread() {
if (mBackgroundThread == null) {
mBackgroundThread = new HandlerThread("MyBackground");
mBackgroundThread.start();
mBackgroundHandler = new Handler(mBackgroundThread.getLooper());
}
}
private void stopBackgroundThread() {
mBackgroundThread.quitSafely();
try {
mBackgroundThread.join();
mBackgroundThread = null;
mBackgroundHandler = null;
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}
图像分析仪的简化代码:
public class ImageAnalyser {
public interface ResultAvailableListener {
void onResult(bool boolResult);
}
private ResultAvailableListener mResultAvailableListener;
public void onResultAvailable(ResultAvailableListener listener) { mResultAvailableListener = listener; }
public void AnalizeNextImage(Image image) {
// Do heavy analysis and put result into theResult
mResultAvailableListener.onResult(theResult);
}
}
UI 线程中有一些长时间运行的操作。尝试分析您的应用,找出阻止主线程的因素。
经过数小时的分析、调试和代码审查,我发现,
问题是由后台线程中的不正确的视图失效引起的
必须使用 View.postInvalidate() 方法 - 此方法检查 View 是否仍附加到窗口,然后执行失效。相反,我在处理来自 MainLooper 的自定义消息时错误地使用了 View.invalidate(),这很少导致失败并使 MainLooper 停止处理更多消息。
对于那些可能有相同问题的人,我添加了正确和不正确的代码。
正确:
public class GraphicOverlayView extends View { ... }
// Somewhere in background thread logic:
private GraphicOverlayView mGraphicOverlayView;
private void invalidateGraphicOverlayViewFromBackgroundThread(){
mGraphicOverlayView.postInvalidate();
};
错:
public class GraphicOverlayView extends View { ... }
// Somewhere in background thread logic:
private GraphicOverlayView mGraphicOverlayView;
private final int MSG_INVALIDATE_GRAPHICS_OVERLAY = 1;
private Handler mUIHandler = new Handler(Looper.getMainLooper()){
@Override
public void handleMessage(Message msg) {
switch (msg.what) {
case MSG_INVALIDATE_GRAPHICS_OVERLAY:{
GraphicOverlayView overlay = (GraphicOverlayView)msg.obj;
// Next line can cause MainLooper stop processing other messages
overlay.invalidate();
break;
}
default:
super.handleMessage(msg);
}
}
};
private void invalidateGraphicOverlayViewFromBackgroundThread(){
Message msg = new Message();
msg.obj = mGraphicOverlayView;
msg.what = MSG_INVALIDATE_GRAPHICS_OVERLAY;
mUIHandler.dispatchMessage(msg);
};