# LockzhinerVisionModule **Repository Path**: LockzhinerAI/LockzhinerVisionModule ## Basic Information - **Project Name**: LockzhinerVisionModule - **Description**: 基于 rv1106 开发的神经网络模型部署仓库，目前支持 picodet、mobilenet 、crnn 、pphumanseg、ocr 、yolov5、paddleocr 等神经网络模型 - **Primary Language**: C++ - **License**: Apache-2.0 - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 6 - **Forks**: 6 - **Created**: 2024-08-28 - **Last Updated**: 2025-06-12 ## Categories & Tags **Categories**: ai **Tags**: None ## README

凌智视觉模块(Lockzhiner Vision Module)

凌智视觉模块(Lockzhiner Vision Module) 是福州市凌睿智捷电子有限公司联合百度飞桨倾力打造的一款高集成度人工智能视觉模块，专为边缘端人工智能和机器视觉应用而设计，其特色包括： * 计算能力：凌智视觉模块搭载单核 ARM Cortex-A7 处理器，并集成了 NEON 和 FPU, 以更出色地处理 SIMD 和浮点计算。同时，该模块支持 Int8 量化，内置 1 TOPs 的 NPU, 足以应对绝大多数的视觉应用场景。 * 开源适配：凌智视觉模块与飞桨低代码开发工具 PaddleX 完美适配，目前支持PaddleX 中的通用图像分类模型产线, 其余任务场景正在适配中, 未来会陆续上线。 * 简单易用：配合飞桨星河社区 Al Studio, 用户可以实现一键训练；配合凌智视觉算法部署库，用户可以实现一键部署，极大地减轻了用户的使用成本。

> 注： > > * 更详细的参数请参考 [凌智视觉模块设备详细参数文档](./docs/device_parameters.md) ## 🔄 最新日志 ## 🎁 购买链接 - [凌智电子-凌智视觉模块](http://e.tb.cn/h.gB2QDrBQqTk6T5b?tk=9Ypj3ogzhLG) ## 💡 入门学习教程 这一部分教程旨在为你提供一个系统化的学习路径，帮助你快速上手 Lockzhiner Vision Module。通过一系列详细的教程, 你将学会如何烧录镜像、连接设备、搭建开发环境和编写简单的程序。 * [凌智视觉模块烧录镜像指南](./docs/introductory_tutorial/burn_image.md) * [凌智视觉模块连接设备指南](./docs/introductory_tutorial/connect_device_using_ssh.md) * [凌智视觉模块WiFi配置指南](./docs/introductory_tutorial/wifi_config.md) * [凌智视觉模块 Python 开发环境搭建指南](./docs/introductory_tutorial/python_development_environment.md) * [凌智视觉模块 C++ 开发环境搭建指南](./docs/introductory_tutorial/cpp_development_environment.md) ## 📺 入门学习视频教程 为了你有一个更加直观的学习体验，凌智电子推出了 Lockzhiner Vision Module 系列教学视频，现在你可以通过下面的链接，学习如何烧录镜像、连接设备、搭建开发环境和如何进行外部通讯。同时你还可以根据自己的需求，根据教程训练属于自己的神经网络模型。 * [凌智视觉模块视频专栏连接](https://space.bilibili.com/1360647720/lists/4727318?type=series) 当然可以！如果你希望用户**点击一个链接后可以直接跳转到百度云链接**，并且**自动填充提取码**（部分浏览器和客户端支持），你可以使用如下格式的超链接： --- ## 📺凌智视觉模块学习资源 **Bilibili 视频专栏** 🔗 [点击访问：凌智视觉模块视频专栏](https://space.bilibili.com/1360647720/lists/4727318?type=series) **百度云视频教程下载（含提取码）** 📎 [点击下载：LockAI凌智视觉模块教程（提取码：nej3）](https://pan.baidu.com/s/1AC9tdddH5OQ0iIp4aPT0Hg?pwd=nej3) ## 🔌 外设控制教程 Lockzhiner Vision Module 拥有丰富的 IO 接口，其接口图片如下图所示: ![](images/periphery.png) 为了帮助你快速上手教程，我们提供了一系列的外设控制例程，你可以点击链接快速学习 * [凌智视觉模块 ADC 使用指南](./example/periphery/adc) * [凌智视觉模块 Capture(摄像头) 使用指南](./example/periphery/capture) * [凌智视觉模块 GPIO 使用指南](./example/periphery/gpio) * [凌智视觉模块 PWM 使用指南](./example/periphery/pwm) * [凌智视觉模块 USART(串口) 使用指南](./example/periphery/usart) ## 🧠 深度学习视觉部署教程 这一部分教程将引导你从零开始训练并部署各种深度学习模型，包括分类模型、检测模型、分割模型和 OCR 模型。通过这些实战教程，你将学习到如何利用 Lockzhiner Vision Module 的高性能计算能力以及借助飞桨生态系统的丰富资源，轻松实现视觉任务的训练和部署。 ### 👍 OpenCV 案例 OpenCV 是一个开源的计算机视觉库，它提供了一组功能强大的函数，用于处理图像和视频，并进行各种图像处理和计算机视觉任务。它由一系列 C++ 类构成，并提供了 Python 接口。 * [凌智视觉模块 OpenCV 边缘检测案例](example/opencv_example/opencv_edge_detection) * [凌智视觉模块 OpenCV 直线检测部署指南](example/opencv_example/opencv_line_detection) * [凌智视觉模块 OpenCV 三角形检测部署指南](example/opencv_example/opencv_triangle_detection) * [凌智视觉模块 OpenCV 矩形检测部署指南](example/opencv_example/opencv_rectangle_detection) * [凌智视觉模块 OpenCV 圆形检测部署指南](example/opencv_example/opencv_circle_detection) ### 👍 目标分类案例 目标分类（Object Classification）是深度学习中的一项核心任务，旨在为输入图像分配一个或多个类别标签。这是计算机视觉的基础问题之一，主要用于识别和区分图像中的主要物体类别，而不关心物体的位置或数量。一般来说，目标分类任务的标注过程比较轻松，适合不需要知道目标位置的场景。 * [凌智视觉模块通用分类模型部署指南](./example/vision/classification) * [凌智视觉模块手写数字分类部署指南](./example/special/digit_handwritten_recognition) * [凌智视觉模块猫狗分类部署指南](example/special/cat_and_dog_classification) * [凌智视觉模块花卉分类部署指南](example/special/flower_classfication/) * [凌智视觉模块口罩佩戴分类部署指南](example/special/maskwear_classfication) ### 👍 目标检测案例 目标检测（Object Detection）是深度学习中计算机视觉领域的重要任务之一，旨在识别图像或视频中所有感兴趣的物体，并准确地定位这些物体的边界框（Bounding Box）。与目标分类不同，目标检测不仅需要预测物体的类别，还需要标注它们在图像中的位置。一般来说，目标检测任务的标注过程比较复杂，适合既需要对目标进行分类，有需要对目标进行定位的场景。 * [凌智视觉模块通用检测模型部署指南](./example/vision/detetcion) ### 👍 条码检测识别案例 条码（二维码和条形码）检测与识别任务是计算机视觉领域的一个具体应用，旨在从图像中准确定位和解码条码的信息。条码分为一维条码（如条形码）和二维条码（如二维码），它们广泛用于商品标识、物流跟踪、电子支付等场景。 * [凌智视觉模块二维码检测与识别部署指南](./example/special/qr_code_recognition) * [凌智视觉模块条形码检测与识别部署指南](./example/special/bar_code_recognition) ### 👍 人脸检测识别案例 在人脸检测与识别任务中，目标是从图像或视频中检测出人脸区域，并进一步识别身份信息。这一任务已广泛应用于安全监控、人机交互、身份验证等场景，是计算机视觉领域的重要研究方向。 * [凌智视觉模块人脸检测部署指南](example/vision/face_detection) * [凌智视觉模块人脸识别部署指南](example/vision/face_recognition) * [凌智视觉模块人脸识别系统部署指南](example/special/face_system) ### 👍 OCR 案例 OCR（Optical Character Recognition，光学字符识别）是一种将图像中的文字（印刷体或手写体）转换为可编辑文本的技术。 * [凌智视觉模块 OCR 文字识别](./Cpp_example/D05_ocr_text_recognition/README.md) * [凌智视觉模块 OCR 文字检测](./Cpp_example/D06_ocr_text_detection/README.md) * [凌智视觉模块 OCR 综合示例](./Cpp_example/D07_ocr_synthesis/README.md) * [凌智视觉模块 PP-OCRV3-Rec 文字识别👍](./Cpp_example/D11_PPOCRv3/README.md) * [凌智视觉模块 PP-OCRV4-Det 文字检测👍](./Cpp_example/D12_ppocrv4_det/README.md) ### 👍 图像分割案例 图像分割是计算机视觉中的关键技术，通过像素级分类将图像划分为多个区域或对象，广泛应用于医学影像、自动驾驶等领域，助力智能分析与场景理解。 * [凌智视觉模块图像分割](./Cpp_example/D08_pp_humanseg/README.md) ### 👍 车牌识别案例 车牌识别基于计算机视觉技术，通过图像处理和深度学习精准定位并提取车牌字符，应用于交通管理、停车场收费及安防系统，提升车辆识别效率与自动化水平。 * [凌智视觉模块车牌识别](./Cpp_example/D09_plate_recognize/README.md) ### 👍 YOLOv5目标检测 目标检测（Object Detection）是深度学习中计算机视觉领域的重要任务之一，旨在识别图像或视频中所有感兴趣的物体，并准确地定位这些物体的边界框（Bounding Box）。与目标分类不同，目标检测不仅需要预测物体的类别，还需要标注它们在图像中的位置。一般来说，目标检测任务的标注过程比较复杂，适合既需要对目标进行分类，有需要对目标进行定位的场景。该案例使用YOLOv5进行目标检测。 * [YOLOv5目标检测](./Cpp_example/D10_yolov5//README.md) ## 🏀 C++ 开发案例 C++ 开发案例以A、B、C、D进行不同类别进行分类，方便初学者进行使用和二次开发。 * `A01 - A99`: 基础外设类 * `B01 - B99`: OpenCV基础函数类 * `C01 - C99`: 传统OpenCV识别类 * `D01 - D99`: 神经网络模型类 * `E01 - E99`: 使用示例类 例程列表如下所示： | 编号 | 类别 | 例程名 | 说明 | | ---- | ------------- | ------------------------------- | ------------------------------------------- | | A01 | 基础外设类 | Capture | [图像采集例程](./Cpp_example/A01_capture/README.md) | | A02 | 基础外设类 | GPIO | [GPIO 控制例程](./Cpp_example/A02_GPIO/README.md) | | A03 | 基础外设类 | PWM | [PWM 信号控制例程](./Cpp_example/A03_PWM/README.md) | | A04 | 基础外设类 | ADC | [ADC 传感器数据采集例程](./Cpp_example/A04_ADC/README.md) | | A05 | 基础外设类 | USART | [串口通信例程](./Cpp_example/A05_USART/README.md) | | A06 | 基础外设类 | LCD | [LCD显示例程](./Cpp_example/A06_LCD/README.md) | | B01 | OpenCV基础类 | Basic Method | [OpenCV 基础操作](./Cpp_example/B01_basic_method/README.md) | | B02 | OpenCV基础类 | Image Information Statistics | [图像信息统计](./Cpp_example/B02_Image_information_statistics/README.md) | | B03 | OpenCV基础类 | Draw | [绘制图形示例](./Cpp_example/B03_Draw/README.md) | | C01 | 传统识别类 | Find Blobs | [Blob 检测](./Cpp_example/C01_find_blobs/README.md) | | C02 | 传统识别类 | Template Matching | [单模板匹配](./Cpp_example/C02_TemplateMatching/README.md) | | C03 | 传统识别类 | Template Matching More | [多模板匹配](./Cpp_example/C03_Template_Matching_more/README.md) | | C04 | 传统识别类 | Find Contours | [轮廓查找](./Cpp_example/C04_find_contours/README.md) | | C05 | 传统识别类 | Fine Color and Shape | [颜色与形状定位](./Cpp_example/C05_Finecolorandshape/README.md) | | C06 | 传统识别类 | QR Code Detector | [二维码检测](./Cpp_example/C06_test_qr_code_detector/README.md) | | C07 | 传统识别类 | Bar Code Detector | [条形码检测](./Cpp_example/C07_test_bar_codeDetector/README.md) | | C08 | 传统识别类 | Aprilta Detector | [Apriltag检测识别](./Cpp_example/C08_Apriltag/README.md) | | D01 | 神经网络类 | Test Detection | [目标检测模型](./Cpp_example/D01_test_detection/README.md) | | D02 | 神经网络类 | Digit Hand Recognition | [手写数字识别](./Cpp_example/D02_DigitHandRecog/README.md) | | D03 | 神经网络类 | Face Recognition System | [人脸识别系统](./Cpp_example/D03_face_recognition_system/README.md) | | D04 | 神经网络类 | Distance | [距离检测](./Cpp_example/D04_distance/README.md) | | D05 | 神经网络类 | OCR Text Recognition | [OCR文字识别](./Cpp_example/D05_ocr_text_recognition/README.md) | | D06 | 神经网络类 | OCR Text Detection | [OCR文字检测](./Cpp_example/D06_ocr_text_detection/README.md) | | D07 | 神经网络类 | OCR Synthesis | [OCR综合示例](./Cpp_example/D07_ocr_synthesis/README.md) | | D08 | 神经网络类 | PPHumanSeg | [图像分割](./Cpp_example/D08_pp_humanseg/README.md) | | D09 | 神经网络类 | Plate Recognition | [车牌识别](./Cpp_example/D09_plate_recognize/README.md) | | D10 | 神经网络类 | YOLOv5 | [YOLOv5目标检测](./Cpp_example/D10_yolov5//README.md) | | D11 | 神经网络类 | PPOCRv3 | [文字识别](./Cpp_example/D11_PPOCRv3/README.md) | | D12 | 神经网络类 | PPOCRv4-Det | [文字检测](./Cpp_example/D12_ppocrv4_det/README.md) | | D13 | 神经网络类 | target_tracking | [多目标跟踪](./Cpp_example/D13_target_tracking/README.md)| | E01 | 使用示例类 | Test_find_Laser | [激光跟踪](./Cpp_example/E01_find_Laser/README.md)| ## 🐛 Bug反馈 如果您遇到问题，您可以前往 [Lockzhiner Vision Module Issues](https://gitee.com/LockzhinerAI/LockzhinerVisionModule/issues) 并点击已完成按钮查看其他用户反馈且我们已经解决的 Bug。 ![](images/issues_completed.png) 如果查找不到对应的解决方案，可点击新建 Issues 来反馈您的 Bug, 我们将尽快与您沟通并及时解决 Bug。 ![](images/issues_feedback.png) ## 🔧 使用到的开源仓库 开源是推动技术进步和创新的重要力量，我们采用了多个开源仓库来增强功能、提升效率。 * [OnnxSlim](https://github.com/inisis/OnnxSlim) * [OpenCV Mobile](https://github.com/nihui/opencv-mobile) * [Paddle2ONNX](https://github.com/PaddlePaddle/Paddle2ONNX) * [PaddleClas](https://github.com/PaddlePaddle/PaddleClas) * [PaddleDetection](https://github.com/PaddlePaddle/PaddleDetection) * [PaddleOCR](https://github.com/PaddlePaddle/PaddleOCR) * [PaddleSeg](https://github.com/PaddlePaddle/PaddleSeg) * [readerwriterqueue](https://github.com/cameron314/readerwriterqueue) * [RKNN Toolkit 2](https://github.com/airockchip/rknn-toolkit2) * [Apriltag](https://github.com/AprilRobotics/apriltag) * [eigen](https://gitlab.com/libeigen/eigen) ## 😊 致谢 凌智视觉模块(Lockzhiner Vision Module) 离不开社区的支持，特别感谢以下个人（或团体）： * 感谢 Rockchip NPU 团队帮忙调试 PaddlePaddle 模型到 RKNN 模型的推理和优化 * 感谢飞桨团队在适配 PaddleX 等套件上提供的帮助 * 感谢 nihui 大佬帮忙审核并将 Lockzhiner Vision Module 的 ISP 代码合入到 opencv-mobile ## 📜 开源协议 Lockzhiner Vision Module 全系列仓库遵循 [Apache License Version 2.0](./LICENSE)。