Android項目集成opencv

  • 使用mac電腦開發，Android Studio開發工具
  • opencv 4.10.0

一、下載opencv庫

1、opencv庫

下載目前最新版opecv4.10.0.jpg

2、下載opencv項目編譯最小庫

  • opencv 移動端庫可以在github上下載：opencv-mobile

  • 此opencv庫支持多種平臺，移動端編譯最小庫。免去了自己重新刪除組合上一步中官方opencv庫到項目里，可以直接拖入項目的CMake文件同文件夾下直接配置使用。


    下載了目前最新版本4_10_0.jpg

二、新建Android項目

1、新建項目

  • 新建Native C++項目
  • 選擇Java開發語言
  • 構建語言可以選擇kotlin也可以選擇Groovy，區別是kotlin會生成build.gradle.kts 構建文件，我這里選擇了Groovy生成buld.gradle文件的選項。
踩坑點提示：
  • 如果選擇了kotlin構建語言，此時項目里的自動生成的構建文件為build.gradle.kts，而后期添加opencv時會自動生成新的build.gradle文件，會覆蓋原build.gradle.kts文件的功能造成失效，需要更改build.gradle.kts的內容到build.gradle，否則項目會編譯失敗。
  • 因為后期會使用cpp，所以直接創建Native C++項目更為方便，項目會自動生成一些cpp必要的庫和demo文件。
  • 選擇C++14
選擇了C++14.jpg

2、運行項目

  • 檢查是否能運行
    先編譯，后運行.jpg

三、引入opencv庫

1.引入module

  • File-->New-->Import Module
  • 選擇下載好的OpenCV-android-sdk/sdk文件夾
  • 注意此處使用了官網中下載的opencv-4.10.0-android-sdk.zip解壓后的OpenCV-android-sdk文件下sdk文件夾。
opencv模型引入.jpg

2.修改opencv的build.gradle文件

  • 修改build.gradle文件中sdk編號，與app的build.gradle中的sdk編號一致。
  • 注釋'kotlin-android'插件
  • 重新編譯成功
修改build.gradle文件.jpg

3.app添加對opencv模型的依賴

  • File --> Project Structure --> Dependencies
Dependencies.jpg

  • 添加成功后會在settings.gradle中自動生成opencv的配置


    opencv庫配置.jpg

4. 項目中添加opencv并配置Cmake

  • 定位到CMakeLists.txt所在文件夾，即：項目/app/src/main/cpp
  • 將下載的opencv-mobile-4.10.0-android放到此文件夾下
  • 注意此處使用的文件為第二步中移動端opencv項目編譯最小庫，即opencv-mobile-4.10.0-android，非opencv官網下載的庫。這個庫比官網下載的要小很多。
  • 修改CMAkeLists.txt文件，添加opencv環境配置
cmake_minimum_required(VERSION 3.22.1)

project("yoloposedemo")


set(OpenCV_DIR "${CMAKE_SOURCE_DIR}/opencv-mobile-4.10.0-android/sdk/native/jni")
find_package(OpenCV REQUIRED core imgproc)

add_library(${CMAKE_PROJECT_NAME} SHARED
        pre_image.cpp)

# jnigraphics-lib 需要link，否則無法在cpp中使用#include <android/bitmap.h> 中的方法
cmake_minimum_required(VERSION 3.22.1)

project("yoloposedemo")

add_library(${CMAKE_PROJECT_NAME} SHARED
        native-lib.cpp)

target_link_libraries(${CMAKE_PROJECT_NAME}
        ${OpenCV_LIBS}
        android
        log)

補充： 若直接拖入官網下載的opencv會報錯如下：

錯誤1：opencv的any.h報錯

  • 添加ncnn庫，并在cmake中配置完ncnn庫，編譯報錯：
opencv的any.h文件報錯.jpg

錯誤2：編譯成功，運行報錯C/C++ Failed

:app debug:x86 failed to configure C/C++ Failed C/C++ configuration.
  • 開始項目新建時選擇了支持c++14，但是添加完ncnn后又刪除會拋以上錯誤 C/C++ Failed
  • 嘗試注釋掉build.gradle(Module :app)中的
        externalNativeBuild {
            cmake {
                cppFlags '-std=c++14'
            }
        }
  • 運行成功，再次去掉對 cppFlags '-std=c++14'的注釋，運行成功。具體原理未知，但直接使用手機端的庫拖入項目cpp文件夾下則可避免。

5.添加opencv處理

1）新建cpp文件

  • 在CMakeLists.txt同路徑下新建pre_image.cpp文件

2）修改CMake文件

  • 在CMakeLists.txt中添加對pre_image.cpp的支持
add_library(${CMAKE_PROJECT_NAME} SHARED
      pre_image.cpp)

3) 在MainActivity.java文件中添加native方法

//獲得Canny邊緣
    public native void getEdge(Object bitmap);
  • 光標移動大這個方法等待1s或光標定位到這個方法使用快捷鍵alt+Enter，彈出框選Create JNI function for getEdge
  • 選擇在pre_image.cpp中新建JNI方法。
getEdge的JNI方法.jpg

4）添加getEdge方法的內容，使用了opencv的Canny方法

#include <jni.h>
#include <string>

#include <android/bitmap.h>
#include <opencv2/opencv.hpp>

using namespace cv;


extern "C"
JNIEXPORT void JNICALL
Java_com_test_yoloposedemo_MainActivity_getEdge(JNIEnv *env, jobject thiz, jobject bitmap) {
    // TODO: implement getEdge()

    AndroidBitmapInfo info;
    void *pixels;

    CV_Assert(AndroidBitmap_getInfo(env, bitmap, &info) >= 0);
    CV_Assert(info.format == ANDROID_BITMAP_FORMAT_RGBA_8888 ||
              info.format == ANDROID_BITMAP_FORMAT_RGB_565);
    CV_Assert(AndroidBitmap_lockPixels(env, bitmap, &pixels) >= 0);
    CV_Assert(pixels);
    if (info.format == ANDROID_BITMAP_FORMAT_RGBA_8888) {
        Mat temp(info.height, info.width, CV_8UC4, pixels);
        Mat gray;
        cvtColor(temp, gray, COLOR_RGBA2GRAY);
        Canny(gray, gray, 45, 75);
        cvtColor(gray, temp, COLOR_GRAY2RGBA);
    } else {
        Mat temp(info.height, info.width, CV_8UC2, pixels);
        Mat gray;
        cvtColor(temp, gray, COLOR_RGB2GRAY);
        Canny(gray, gray, 45, 75);
        cvtColor(gray, temp, COLOR_GRAY2RGB);
    }
    AndroidBitmap_unlockPixels(env, bitmap);

}

5) CMake文件中再次配置jnigraphics-lib

  • 由于pre_image.cpp中使用了<android/bitmap.h>中的方法，因此需要在CMakeList.txt中配置一下jnigraphics-lib，否則編譯成功但運行時報錯
find_library(jnigraphics-lib jnigraphics)

target_link_libraries(${CMAKE_PROJECT_NAME}
        ${OpenCV_LIBS}
        android
        log
        ${jnigraphics-lib})

6.新建xml文件用于ui展示

<?xml version="1.0" encoding="utf-8"?>
<LinearLayout xmlns:android="http://schemas.android.com/apk/res/android"
    android:orientation="vertical"
    android:layout_width="fill_parent"
    android:layout_height="fill_parent">

    <LinearLayout
        android:orientation="horizontal"
        android:layout_width="fill_parent"
        android:layout_height="wrap_content">

        <Button
            android:id="@+id/checkImgBtn"
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:text="選圖" />
        <Button
            android:id="@+id/buttonDet"
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:text="渲染" />
    </LinearLayout>

    <ImageView
        android:id="@+id/showImg"
        android:layout_width="fill_parent"
        android:layout_height="fill_parent"
        android:layout_weight="1" />

</LinearLayout>

7.修改MainActivity.java

  • 添加按鈕點擊方法
package com.test.yoloposedemo;

import androidx.appcompat.app.AppCompatActivity;

import android.graphics.Bitmap;
import android.graphics.BitmapFactory;
import android.health.connect.datatypes.ActiveCaloriesBurnedRecord;
import android.os.Bundle;
import android.view.View;
import android.widget.Button;
import android.widget.ImageView;
import android.widget.TextView;

import com.test.yoloposedemo.databinding.ActivityHomeBinding;
import com.test.yoloposedemo.databinding.ActivityMainBinding;

public class MainActivity extends AppCompatActivity {

    // Used to load the 'yoloposedemo' library on application startup.
    static {
        System.loadLibrary("yoloposedemo");
    }

    private ActivityHomeBinding homeBinding;
    private ImageView imageView;
    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);

        homeBinding = ActivityHomeBinding.inflate(getLayoutInflater());

        setContentView(homeBinding.getRoot());

        //
        Button checkImgBtn = homeBinding.checkImgBtn;
        checkImgBtn.setOnClickListener(new View.OnClickListener() {
            @Override
            public void onClick(View arg0) {
                loadImage();
            }
        });

        //
        Button buttonDet = homeBinding.buttonDet;
        buttonDet.setOnClickListener(new View.OnClickListener() {
            @Override
            public void onClick(View arg0) {
                detectImage();
            }
        });

        //
        imageView = homeBinding.showImg;
        loadImage();
    }

    private void loadImage() {
        String imageName = "dog";

        int imageResourceId = getResources().getIdentifier(imageName, "drawable", getPackageName());
        imageView.setImageResource(imageResourceId);

    }

    private void detectImage() {
        Bitmap bitmap = BitmapFactory.decodeResource(getResources(), R.drawable.dog);
        getEdge(bitmap);
        imageView.setImageBitmap(bitmap);
    }

    /**
     * A native method that is implemented by the 'yoloposedemo' native library,
     * which is packaged with this application.
     */

    //獲得Canny邊緣
    public native void getEdge(Object bitmap);
}

8.運行效果

效果圖.jpg

參考文章

OpenCV On Android最佳環境配置指南(Android Studio篇)

最后編輯于 ：
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明：文章內容（如有圖片或視頻亦包括在內）由作者上傳并發布，文章內容僅代表作者本人觀點，簡書系信息發布平臺，僅提供信息存儲服務。

推薦閱讀更多精彩內容