WPF-VisionMasterOpenCV

WPF-VisionMasterOpenCV一、项目概述WPF-VisionMasterOpenCV是一个基于 WPF EmguCVOpenCV的.NET封装开发的机器视觉软件框架。它采用节点流程图的方式让用户可以通过拖拽节点来构建视觉检测流程。项目架构WPF-VisionMaster/ ├── Document/ # 文档资源 ├── Solution/ # 解决方案文件 └── Source/ ├── Apps/ # 应用入口主程序 │ └── H.App.VisionMaster.OpenCV/ ├── NodeDatas/ # 节点数据定义Onnx等 │ ├── H.NodeDatas.Onnx.OpenCV/ │ └── H.NodeDatas.Zoo/ ├── Setups/ # 安装包 ├── VisionMaster/ # 核心视觉处理模块 │ ├── H.VisionMaster.DiagramData/ │ ├── H.VisionMaster.Network/ │ ├── H.VisionMaster.NodeData/ │ └── H.VisionMaster.OpenCV/ # ⭐ OpenCV节点核心 └── WPF-Control/ # WPF控件库依赖模块二、学习路径规划阶段一环境搭建与项目启动第1-2天目标能够成功编译并运行项目1.1 准备开发环境必备工具Visual Studio 2022需安装 .NET 6/7 开发工具Git用于拉取子模块1.2 克隆项目并恢复依赖# 克隆主项目git clone https://github.com/xxx/WPF-VisionMasterOpenCV.git# 进入目录cd WPF-VisionMasterOpenCV\WPF-VisionMasterOpenCV2.0\WPF-VisionMaster# 初始化子模块重要git submodule init git submodule update# 打开解决方案Start-ProcessSolution\WPF-VisionMaster.sln1.3 理解启动流程查看入口文件Source/Apps/H.App.VisionMaster.OpenCV/App.xaml.cspublicpartialclassApp:ApplicationBase{protectedoverridevoidConfigureServices(IServiceCollectionservices){services.AddApplicationServices();services.AddProjectVisionProjectService(x{x.Extenstion.json;x.JsonSerializerServicenewNewtonsoftJsonSerializerService();});}}关键点使用Dependency Injection依赖注入模式项目配置使用 JSON 序列化继承自ApplicationBase来自 H.Extensions 库阶段二核心概念理解第3-5天目标理解节点系统的设计模式2.1 节点分类体系项目中的节点按功能划分为多个类别类别目录功能说明数据源1 - Src/摄像头采集、图片读取、视频读取预处理2 - Preprocessings/颜色转换、阈值、缩放、翻转等模糊处理3 - Blurs/高斯模糊、均值模糊等形态学4 - Morphology/腐蚀、膨胀、开闭运算条件判断5 - Conditions/像素阈值判断等模板匹配6 - TemplateMatchings/SIFT/SURF特征匹配、模板匹配检测器7 - Detector/Canny边缘、Blob、轮廓检测特征检测8 - Feature/AKaze、BRISK等特征点检测其他9 - Other/YOLO、Haar级联、SVM等输出9 - Outputs/OK/NG判定、消息通知2.2 节点基类分析查看典型节点实现理解继承关系// 颜色转换节点publicclassCvtColor:OpenCVNodeDataBase,IPreprocessingGroupableNodeData{// 属性定义privateColorConversionCodes_colorConversionCodeColorConversionCodes.BGR2GRAY;[Display(Name转换规则,GroupNameVisionPropertyGroupNames.RunParameters)]publicColorConversionCodesColorConversionCode{get;set;}// 核心处理逻辑protectedoverrideFlowableResultMatInvoke(ISrcVisionNodeDataMatsrcImageNodeData,IVisionNodeDataMatfrom,IFlowableDiagramDatadiagram){Matmatfrom.Mat.CvtColor(this.ColorConversionCode,this.DstCn);returnthis.OK(mat);}}关键接口说明接口作用ISrcImageGroupableNodeData数据源节点标记IPreprocessingGroupableNodeData预处理节点标记IDetectorGroupableNodeData检测器节点标记IFlowableLinkData节点间数据传递IFlowableDiagramData流程图上下文阶段三OpenCV扩展方法深入第6-8天目标掌握OpenvCVExtension.cs中的核心扩展方法3.1 坐标转换方法// WPF Rect ↔ OpenCV Rect 互转publicstaticSystem.Windows.RectToWindowRect(thisRectrect){returnnewSystem.Windows.Rect(rect.Left,rect.Top,rect.Width,rect.Height);}publicstaticRectToCVRect(thisSystem.Windows.Rectrect){returnnewRect((int)rect.Left,(int)rect.Top,(int)rect.Width,(int)rect.Height);}3.2 颜色转换// WPF Color ↔ OpenCV ScalarpublicstaticScalarToScalar(thisColorcolor){returnScalar.FromRgb(color.R,color.G,color.B);}3.3 HSV颜色范围计算重要publicstaticTupleScalar,ScalarGetHSVRange(thisColorcolor,inthRange30,intsRange20,intvRange20){// RGB转HSV然后计算上下限范围// 用于颜色识别场景}3.4 图像转WPF控件publicstaticImageSourceToImageSource(thisMatmat){if(!mat.IsValid())returnnull;returnApplication.Current.Dispatcher.Invoke((){returnmat.ToWriteableBitmap();});}阶段四典型节点实现学习第9-12天目标掌握不同类型节点的实现模式4.1 数据源节点 - 摄像头采集publicclassCameraCaptureNodeData:VideoCaptureNodeDataBase,ISrcImageGroupableNodeData{publicoverrideasyncTaskIFlowableResultInvokeAsync(...){usingVideoCapturecapturenewVideoCapture();capture.Open(this.VideoCaptureIndex,this.VideoCaptureAPIs);// 循环采集帧while(true){MatframeMatcapture.RetrieveMat();// 处理帧...frameMat.Dispose();}}}关键点使用VideoCapture类读取摄像头using语句确保资源释放await this.InvokeFrameMatAsync()传递帧数据4.2 预处理节点 - Canny边缘检测publicclassCanny:OpenCVNodeDataBase,IDetectorGroupableNodeData{[Range(50.0,100.0)]publicdoubleThreshold1{get;set;}[Range(150.0,200.0)]publicdoubleThreshold2{get;set;}protectedoverrideFlowableResultMatInvoke(...){MatresultnewMat();Cv2.Canny(preMat,result,this.Threshold1,this.Threshold2,...);returnthis.OK(result);}}4.3 高级节点 - YOLOv3目标检测// 位于 9 - Other/Yolov3.cspublicclassYolov3:OpenCVNodeDataBase,IDetectorGroupableNodeData{// 配置模型路径privatestring_weightsyolov3.cfg;privatestring_modelyolov3.weights;protectedoverrideFlowableResultMatInvoke(...){// 使用 Dnn 模块加载 YOLO 模型usingNetnetCv2.Dnn.ReadNetFromDarknet(_weights,_model);// 推理检测...}}阶段五创建自定义节点第13-15天目标能够编写自己的视觉处理节点5.1 创建节点的步骤usingH.Controls.Diagram.Presenter.NodeDatas.Base;usingEmgu.CV;// 1. 添加特性标记[Icon(FontIcons.Custom)][Display(Name我的自定义节点,GroupName自定义,Description自定义处理逻辑)]// 2. 继承基类并实现接口publicclassMyCustomNode:OpenCVNodeDataBase,IPreprocessingGroupableNodeData{// 3. 定义可配置属性privateint_parameter10;[Display(Name参数,GroupName运行参数)]publicintParameter{get{return_parameter;}set{_parametervalue;RaisePropertyChanged();}}// 4. 实现核心处理方法protectedoverrideFlowableResultMatInvoke(ISrcVisionNodeDataMatsrcImageNodeData,IVisionNodeDataMatfrom,IFlowableDiagramDatadiagram){// 获取输入图像MatinputMatfrom.Mat;// 执行自定义处理MatresultnewMat();// ... 你的 OpenCV 处理代码// 返回结果returnthis.OK(result);}}5.2 节点注册创建节点后需要在模块初始化时注册// 在扩展类中注册publicstaticclassMyNodeExtension{publicstaticIServiceCollectionAddMyCustomNode(thisIServiceCollectionservices){services.AddVisionNodeDataMyCustomNode();returnservices;}}阶段六实战项目开发第16-20天目标完成一个完整的视觉检测项目6.1 项目案例产品缺陷检测流程设计摄像头采集→ 获取实时图像色彩变换→ 转灰度图高斯模糊→ 降噪Canny边缘检测→ 提取边缘轮廓查找→ FindContoursBlob检测→ 识别缺陷区域OK/NG判定→ 根据缺陷数量输出结果6.2 配置流程图┌─────────────┐ ┌─────────────┐ ┌─────────────┐ │ 摄像头采集 │───▶│ 色彩变换 │───▶│ 高斯模糊 │ └─────────────┘ └─────────────┘ └─────────────┘ │ │ ▼ ▼ ┌─────────────┐ ┌─────────────┐ ┌─────────────┐ │ Canny边缘 │───▶│ 轮廓查找 │───▶│ Blob检测 │ └─────────────┘ └─────────────┘ └─────────────┘ │ ▼ ┌─────────────┐ │ OK/NG判定 │ └─────────────┘三、关键技术点总结1. EmguCV 基础类/方法作用MatOpenCV图像容器VideoCapture视频/摄像头捕获Cv2.Canny()边缘检测Cv2.GaussianBlur()高斯模糊Cv2.FindContours()轮廓检测Cv2.Dnn.ReadNetFromDarknet()加载YOLO模型2. WPF 集成要点线程安全UI更新必须在 Dispatcher 线程执行图像转换Mat.ToImageSource()方法数据绑定使用BindableBase实现 MVVM3. 节点生命周期创建节点 → LoadDefault() → IsValid() → BeforeInvokeAsync() → InvokeAsync() → UpdateResultImageSource() → 销毁四、学习资源推荐官方文档EmguCV 官方文档OpenCV 官方教程参考项目WPF-Control 文档HeBianGu 的 GitHub视频教程B站搜索WPF-VisionMaster相关教程OpenCV 入门视频五、练习建议入门练习修改现有节点参数观察效果变化基础练习创建一个简单的自定义节点如亮度调整进阶练习实现一个完整的检测流程如二维码识别高级练习集成自定义深度学习模型