Opencv in iOS 1:Testing Canny of Basic FrameWork

颜安宁
2023-12-01

Opencv 是最通用的计算机视觉/图像视频处理库,对常见的算法都有很好的封装。在它的文档中我们可以看到,Opencv 只提供 C/C++ 和 Python 的 API。然则移动 App 以它的特有的便利正在逐渐取代 Desktop App 和 Web App,尤其camera 相关的 App 更是得到青睐。图像和视频相关的处理是 Opencv 的强项,如果能把它用在移动应用的开发上,那最好不过了。 幸运的是,Opencv 提供了对 iOS 和 Android 的支持,虽然不是直接支持 Objc 和 Java API。 Android 不太清楚,Objc 由于是可以与 C++混编的,因此直接调用 Opencv 的C++ API 即可。

iOS 中使用 OpenCV,特别需要注意的地方是 Cocoa(OBJC) 的 API 和 OpenCV(C++) 的 API 的关系。比如说图像,Cocoa 中是用 UIImage, 在 OpenCV 中用 Mat。

@interface ViewController : UIViewController <CvVideoCameraDelegate>

@property (nonatomic, strong) CvVideoCamera* videoCamera;

- (instancetype)initWithCameraView:(UIImageView *)view scale:(CGFloat)scale;

- (void)startCapture;
- (void)stopCapture;

@end

关于 iOS 开发中使用 OpenCV,Google 出来的资料比较少,也比较旧,无法完全适用 Opencv、iOS、Xcode 这几年中产生的新版本;Apple 和 Opencv 都没有提供官方的文档或指南。(Google 一下 Android OpenCV 看看人家有多少资料)。结合我的配置和使用来谈一谈经验吧。
链接 OpenCV
1.与 VS 中使用 OpenCV 开发 C 程序前复杂的配置相比,这里简直 so easy. 去 OpenCV 官网 下载 OpenCV for iOS,解压出来是 opencv2.framework ,你看,它就是个框架,与 Foundation 之类的框架没啥区别。要想在工程中使用,一个方法是直接把上述文件拖进工程;另一个方法是在 Build Phases –> Link Binary with libraries 中加入。使用 OpenCV与平时使用 OpenCV 相似,只需要加入头文件即可使用。值得注意的是:在使用 OpenCV 函数的 m 文件,后缀改成 mm,告诉 Xcode 这里有 C++与 objc 的混合使用。
新的 Xcode(6)生成工程后并没有 pch 文件,所以无需按照其他教程说的在这里写 #ifdef __cplusplus … 。我们在使用 OpenCV 的文件,如上述的 mm 文件,也无需再写这个了。
有的教程说 opencv 的 import 要写在 UIKit, Foundation 这些系统自带的 framework 之前,否则会出现重命名的冲突。在新版中无需在意这个问题。而且版本一直在更新,有些细节会变化,比如 ios.h 原来是在另一个包中。(IN THE highgui LIB)
Demo code:http://blog.csdn.net/songrotek/article/details/407800732.
Canny > for one image

#import <opencv2/highgui/ios.h>
#import <opencv2/highgui/cap_ios.h>
#import "ViewController.h"
#import <opencv2/opencv.hpp>
#import <opencv2/imgproc/types_c.h>
@interface ViewController ()  
{  
    cv::Mat cvImage;  
}  
@property (weak, nonatomic) IBOutlet UIImageView *imageView;  
@end  

@implementation ViewController  

- (void)viewDidLoad {  
    [super viewDidLoad];  
    CGRect rect = [UIScreen mainScreen].bounds;  
    self.imageView.frame = rect;  

    UIImage *image = [UIImage imageNamed:@"road.JPG"];  
    // Convert UIImage * to cv::Mat  
    UIImageToMat(image, cvImage);  
    if (!cvImage.empty()) {  
        cv::Mat gray;  
        // Convert the image to grayscale;  
        cv::cvtColor(cvImage, gray, CV_RGBA2GRAY);  
        // Apply Gaussian filter to remove small edges  
        cv::GaussianBlur(gray, gray, cv::Size(5,5), 1.2,1.2);  
        // Calculate edges with Canny  
        cv::Mat edges;  
        cv::Canny(gray, edges, 0, 60);  
        // Fill image with white color  
        cvImage.setTo(cv::Scalar::all(255));  
        // Change color on edges  
        cvImage.setTo(cv::Scalar(0,128,255,255),edges);  
        // Convert cv::Mat to UIImage* and show the resulting image  
        self.imageView.image = MatToUIImage(cvImage);  
    }  


}  

using canny camera

// //  ViewController.m //  OPENCV // //  Created by MAC on 15/6/7. // Copyright (c) 2015年 MAC. All rights reserved. //
#import "ViewController.h"
#import <opencv2/highgui/ios.h>
#import <opencv2/highgui/cap_ios.h>
#import "ViewController.h"
#import <opencv2/opencv.hpp> //#import <opencv2/imgcodecs/ios.h>
#import <opencv2/imgproc/types_c.h> @interface ViewController () {
    cv::Mat cvImage; } @property (weak, nonatomic) IBOutlet UIImageView *imageView; @end




@implementation ViewController


- (void)viewDidLoad {

    [super viewDidLoad];
    self.videoCamera = [[CvVideoCamera alloc] initWithParentView:self.imageView];
    self.videoCamera.delegate = self;
    self.videoCamera.defaultAVCaptureDevicePosition = AVCaptureDevicePositionBack;
    self.videoCamera.defaultAVCaptureSessionPreset = AVCaptureSessionPreset640x480;
    self.videoCamera.defaultFPS = 20; }
     //- (void)startCapture { //    [self.videoCamera start]; //}

//- (instancetype)initWithCameraView:(UIImageView *)view scale:(CGFloat)scale { //    self = [super init]; //    if (self) { // self.videoCamera = [[CvVideoCamera alloc] initWithParentView:view]; // self.videoCamera.defaultAVCaptureDevicePosition = AVCaptureDevicePositionBack; //        self.videoCamera.defaultAVCaptureSessionPreset = AVCaptureSessionPreset640x480; //        self.videoCamera.defaultAVCaptureVideoOrientation = AVCaptureVideoOrientationPortrait; //        self.videoCamera.defaultFPS = 30; //        self.videoCamera.grayscaleMode = NO; //        self.videoCamera.delegate = self; //        //        self.scale = scale; //        //        self.videoCamera = [[CvVideoCamera alloc] initWithParentView:self.imageView]; //        //        self.videoCamera.delegate = self; //        //        self.videoCamera.defaultAVCaptureDevicePosition = AVCaptureDevicePositionBack; //        //        self.videoCamera.defaultAVCaptureSessionPreset = AVCaptureSessionPreset640x480; //        //        self.videoCamera.defaultFPS = 30; //         //    } //    return self; //}
- (void)processImage:(cv::Mat&)image {

    // Do some OpenCV stuff with the image
    cv::Mat gray;
    // Convert the image to grayscale;
    cv::cvtColor(image, gray, CV_RGBA2GRAY);
    // Apply Gaussian filter to remove small edges
    cv::GaussianBlur(gray, gray, cv::Size(5,5), 1.2,1.2);
    // Calculate edges with Canny
    cv::Mat edges;
    cv::Canny(gray, edges, 0, 16);
    // Fill image with white color
    image.setTo(cv::Scalar::all(255));
    // Change color on edges
    image.setTo(cv::Scalar(0,128,255,255),edges);
    // Convert cv::Mat to UIImage* and show the resulting image
    self.imageView.image = MatToUIImage(image);
     }



- (IBAction)Start:(id)sender {
    [self.videoCamera start];
     }

- (IBAction)Stop:(id)sender {
    [self.videoCamera stop];

} @end
  1. 使用CocoaPod pod install(Link to git)
 类似资料:

相关阅读

相关文章

相关问答