OpenHarmonyでナンバープレート認識を実装するための3つのステップ

導入

このナンバープレート認識プロジェクトは、オープンソースプロジェクトEasyPR(Easy to do Plate Recognition)に基づいています。EasyPRは、OpenCVオープンソースライブラリに基づいて開発されたオープンソースの中国のナンバープレート認識システムです。

このプロジェクトでは、Runhe HiSpark Taurus AIカメラ(Hi3516DV300)カメラ開発ボードキット(以下、Hi3516)を使用して、ナンバープレートの写真を撮り、認識結果を表示します。使用されるシステムはOpenAtomOpenHarmony(「OpenHarmony」と呼ばれます)です。3.1リリーススモールシステム。

まず、Hi3516のカメラをナンバープレートに向けます。その距離は、以下に示すように約60cm〜70cmです。

プログラムを実行した後、1を押して写真を撮り、2を押して認識結果を次のように出力します。

開発プロセス

このナンバープレート認識プロジェクトは、OpenHarmonyのメディアサブシステムを使用して実装されます。このコードは、駐車シナリオでのローカルナンバープレート認識に基づいています。説明すると、コード構造は次のとおりです。

三者間図書館移植

EasyPRの実装はOpenCVの実装に基づいているため、EasyPRの実装は最初にOpenCVを移植する必要があります。移植の方法は、Gnを使用してシェルスクリプトを呼び出し、シェルスクリプトを使用して実装のためにMakefileを呼び出すことです。

├── BUILD.gn
├── include 
│   ├── camera.h                                       // 摄像头定义
│   ├── local_net_communication.h          // 设备协同主要功能定义
│   ├── local_net_def.h                             // 设备协同打印日志
│   ├── local_net_dlist.h                            // 设备协同设备列表定义
│   ├── local_net_message.h                    // 设备协同传输消息定义
│   ├── local_net_udp.h                             // 设备协同udp协议定义
│   ├── local_net_utils.h                            // 设备协同通用工具定义
│   ├── log.h                                              // 打印日志定义
│   └── wpa_work.h                                   // wifi设置定义
└── src
    ├── base64.cpp                                     // 图片转base64格式功能代码 
    ├── camera.cpp                                     // 摄像头实现
    ├── local_net_communication.c            // 设备协同主要功能实现
    ├── local_net_dlist.c                              // 设备协同设备列表实现
    ├── local_net_message.c                      // 设备协同传输消息实现
    ├── local_net_udp.c                              // 设备协同udp协议实现
    ├── local_net_utils.c                              // 设备协同通用工具实现
    ├── main.cpp                                         // 主程序
    └── wpa_work.c                                     // wifi设置实现

移植の一般的なプロセスを以下に説明します。詳細については、小規模システムでのオープンソースプロジェクトのナンバープレート認識の実行とOpenCVライブラリの移植を参照してください。

OpenCVの移植

ソースコードをダウンロードする

ソースコードを取得するOpenCVライブラリのソースコードをOpenHarmonyルートディレクトリのthird_partyに配置します。

Makefileを生成する

OpenCVソースコードのルートディレクトリに新しいビルドディレクトリを作成して、Makefileファイルを生成します。

cmake-guiを使用して、ビルド環境を構成します。

cd build
make-gui ..

表示されるUIインターフェイスは次のとおりです。

次に示すように、[構成]をクリックして構成し、構成する4番目のオプションを選択します。

ツールチェーンを構成します。

[生成]をクリックして、Makefileを生成します。

シェルスクリプトを作成する   

build_opencv.shをOpenCVソースコードのルートディレクトリに追加します。

touch build_opencv.sh
chmod 777 build_opencv.sh
vim build_opencv.sh
##添加如下内容
#!/bin/sh
processor=`cat /proc/cpuinfo|grep processor | sort -u | wc -l`
cd build
make -j$processor
cp lib/* $1/libs/

Gnファイルを作成する

BUILD.gnをOpenCVソースコードのルートディレクトリに追加し、OpenCVライブラリをビルドに追加します。

EasyPRの移植

ソースコードをダウンロードする

获取源码 EasyPR 库源码放在源码根目录下的 third_party 下:

生成Makefile

在 EasyPr 源码根目录新建 build 目录:

mkdir build
cd build
cmake-gui ..

显示的 UI 界面如下图:

点击 Configure 进行配置,选择第四个选项进行配置,如下图:

配置工具链:

点击 Generate 生成 Makefile。

创建Shell脚本

在 EasyPR 源码根目录新增 build_easypr.sh:

创建Gn文件

在 EasyPR 源码根目录新增 BUILD.gn 加入至编译构建:

vim BUILD.gn


#BUILD.gn中添加如下内容
import("//build/lite/config/component/lite_component.gni")
import("//build/lite/ndk/ndk.gni")


root_build = rebase_path(root_build_dir)


build_ext_component("easypr_lib") {
    command = "sh build_easypr.sh $root_build"
    exec_path = "$root_build/../../../third_party/EasyPR"
}


lite_component("easypr") {
    deps = [
        "//third_party/opencv:opencv",
        ":easypr_lib"
    ]
    features = []
}

最终 OpenCV 与 EasyPR 在 third_party 目录如下图所示:

在 OpenHarmony 实现 EasyPR 需要主要分为如下三步:

  1. GN 构建,将 EasyPR 加入编译构建;

  2. 拍照,调用 OpenHarmony 拍照接口,拍摄车牌;

  3. EasyPR 本地识别,调用 EasyPR 识别车牌接口并返回识别结果。

GN构建

GN 构建中包含了 EasyPR 的头文件路径 、链接 EasyPR 动态库、编译依赖 EasyPR。如下所示:

拍照

拍照功能是基于官方文档拍照开发指导开发的,其 demo 样例在如下目录:

在停车场景中二维码识别与车牌识别共用同一份拍照代码 ,为提高二维码识别率在拍照初始化时须将分辨率设置为 1280*720。该改动在进行车牌识别时不会影响 ,初始化拍照代码如下图:

设置照片保存路径在文件 camera.h 下: 

因为在停车场景中二维码扫码与车牌识别都会调用拍照接口,因此使用 s_runAi 作区分:

int main(int argc,char **argv)
{
    int ret;
    char licensePlate[32] = {0};
    char input;
    InitCamera();
    PlateInit();
    while(cin >> input) {
        switch (input) {
            case '1':
                RunAICamera();                                                  // 拍照
                break;
            case '2':
                memset(licensePlate, 0, sizeof(licensePlate));
                ret = GetPlateString(IMG_PATH, licensePlate);   // 识别车牌
                SAMPLE_INFO("ret -> %d, licensePlate->%s", ret, licensePlate);
                break;
            case 's':
                PlateDeinit();
                ExitCamera();
                return 0;
            default:
                SAMPLE_ERROR("input Error");
                break;
        }
    }
    return 0;
}

进行拍照后会进入拍照数据处理,当 s_runAi 为 false 说明是二维码识别,直接调用二维码识别接口即可。当 s_runAi 为 true 时须将拍照的数据保存为图片:

将拍照数据以图片保存路径为“/sdcard/CaptureAi.jpg” 。

EasyPR本地识别

编写主程序 main.cpp 设置程序功能为按 1 拍照、按 2 显示结果 :

编译烧录

前文大致概括了 OpenCV 和 EasyPR 的移植步骤,更详细的关于环境搭建、烧录以及项目源码构建的步骤,请查看参考文章本地车牌识别。

总结

编写车牌识别库对外接口,相关接口使用可以参考作者文章介绍;本文章的源码参考本地车牌识别。丰富多样的 OpenHarmony 开发样例离不开广大合作伙伴和开发者的贡献,如果你也想把自己开发的样例分享出来,欢迎把样例提交到 OpenHarmony 知识体系 SIG 仓来,共建开发样例请参考如何共建开发样例。

车牌识别器(OpenCV版本)

gitee.com/openharmony…

车牌识别器

gitee.com/openharmony…

拍照开发指导

gitee.com/openharmony…

作者文章列表

gitee.com/link?target…

源码参考

gitee.com/openharmony…

构建开发样例

gitee.com/openharmony…

おすすめ

転載: juejin.im/post/7117073657121210398