【官方框架地址】
https://github.com/ultralytics/ultralytics
【openvino介绍】
OpenVINO(Open Visual Inference & Neural Network Optimization)是由Intel推出的,用于加速深度学习模型推理的工具套件。它旨在提高计算机视觉和深度学习应用的性能,特别是在边缘计算和实时推理场景中。
OpenVINO的核心功能包括对多种深度学习框架的支持、高效的模型优化和推理引擎,以及跨多种硬件平台的可扩展性。它支持包括TensorFlow、Caffe、PyTorch等在内的主流深度学习框架,并能够将这些框架的模型转换为OpenVINO的中间表示格式(Intermediate Representation,IR),从而实现对模型的优化和加速。
优化过程包括对模型的剪枝、量化、压缩等操作,以减小模型大小、降低计算复杂度,并提高推理速度。推理引擎则负责将优化后的模型部署到实际的硬件平台上,如Intel的处理器、GPU、FPGA等,实现高效的推理计算。
此外,OpenVINO还提供了一系列的工具和库,如Inference Engine、Media SDK等,用于简化深度学习应用的开发和部署。这些工具和库提供了丰富的计算机视觉和深度学习算法库,以及对音频、视频、图像等多媒体数据的处理能力,使得开发者能够更加便捷地构建各种智能应用。
总的来说,OpenVINO是一个功能强大、易用性强的工具套件,它为开发者提供了从模型训练到推理的一站式解决方案,使得深度学习技术能够更好地应用于实际场景中,提高计算机视觉和人工智能应用的性能和效率。
【效果展示】
【实现部分代码】
using System;
using System.Collections.Generic;
using System.ComponentModel;
using System.Data;
using System.Diagnostics;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Threading.Tasks;
using System.Windows.Forms;
using OpenCvSharp;namespace FIRC
{public partial class Form1 : Form{Mat src = new Mat();Yolov8Manager detector = new Yolov8Manager();public Form1(){InitializeComponent();}private void button1_Click(object sender, EventArgs e){OpenFileDialog openFileDialog = new OpenFileDialog();openFileDialog.Filter = "图文件(*.*)|*.jpg;*.png;*.jpeg;*.bmp";openFileDialog.RestoreDirectory = true;openFileDialog.Multiselect = false;if (openFileDialog.ShowDialog() == DialogResult.OK){src = Cv2.ImRead(openFileDialog.FileName);pictureBox1.Image = OpenCvSharp.Extensions.BitmapConverter.ToBitmap(src);}}private void button2_Click(object sender, EventArgs e){if(pictureBox1.Image==null){return;}var result = detector.Inference(src);var resultMat = detector.DrawImage(result,src);pictureBox2.Image= OpenCvSharp.Extensions.BitmapConverter.ToBitmap(resultMat); //Mat转Bitmap}private void Form1_Load(object sender, EventArgs e){detector.LoadWeights(Application.StartupPath+ "\\weights\\yolov8n.xml");}private void button3_Click(object sender, EventArgs e){VideoCapture capture = new VideoCapture(0);if (!capture.IsOpened()){Console.WriteLine("video not open!");return;}Mat frame = new Mat();var sw = new Stopwatch();int fps = 0;while (true){capture.Read(frame);if (frame.Empty()){Console.WriteLine("data is empty!");break;}sw.Start();var result = detector.Inference(src);var resultMat = detector.DrawImage(result, src);sw.Stop();fps = Convert.ToInt32(1 / sw.Elapsed.TotalSeconds);sw.Reset();Cv2.PutText(resultMat, "FPS=" + fps, new OpenCvSharp.Point(30, 30), HersheyFonts.HersheyComplex, 1.0, new Scalar(255, 0, 0), 3);//显示结果Cv2.ImShow("Result", resultMat);int key = Cv2.WaitKey(10);if (key == 27)break;}capture.Release();}}
}
【视频演示】
https://www.bilibili.com/video/BV16e41117rM/?vd_source=989ae2b903ea1b5acebbe2c4c4a635ee
【测试环境】
vs2019,opencvsharp4.8.0,netframework4.7.2