Question

我对OpenCV编程很陌生，我正在开发一个这样的应用程序：

从相机拍摄相框
使用openCV进行分析以检测照片中的所有矩形（即想要查找存储在架子上的所有产品）
裁剪找到的所有矩形元素。

我的问题是检测阶段的效果不是很好。用于分析拍摄照片的代码：

Bitmap originalPhoto;
        byte[] bytes = photo.getByteArray("bitmap");

        originalPhoto = BitmapFactory.decodeByteArray(bytes, 0, bytes.length);

            Mat imgMat=new Mat();

            Utils.bitmapToMat(originalPhoto,imgMat);

        Mat imgSource=imgMat.clone();

        Imgproc.cvtColor( imgMat, imgMat, Imgproc.COLOR_BGR2GRAY);
        Bitmap grayscale=Bitmap.createBitmap(imgMat.cols(),imgMat.rows(),Bitmap.Config.ARGB_8888);
        Utils.matToBitmap(imgMat,grayscale);

        String root = Environment.getExternalStorageDirectory().toString();
        File myDir = new File(root + "/saved_images");

        Imgproc.Canny(imgMat,imgMat,0,255);
        Bitmap canny=Bitmap.createBitmap(imgMat.cols(),imgMat.rows(),Bitmap.Config.ARGB_8888);
        Utils.matToBitmap(imgMat,canny);

        Imgproc.GaussianBlur(imgMat, imgMat, new  org.opencv.core.Size(1, 1), 2, 2);
        Bitmap blur=Bitmap.createBitmap(imgMat.cols(),imgMat.rows(),Bitmap.Config.ARGB_8888);
        Utils.matToBitmap(imgMat,blur);

        //find the contours
        List<MatOfPoint> contours = new ArrayList<MatOfPoint>();
        Imgproc.findContours(imgMat, contours, new Mat(), Imgproc.RETR_LIST, Imgproc.CHAIN_APPROX_SIMPLE);

        MatOfPoint temp_contour = contours.get(0); //the largest is at the index 0 for starting point

        for (int idx = 0; idx < contours.size(); idx++) {
            temp_contour = contours.get(idx);
                //check if this contour is a square

                MatOfPoint2f new_mat = new MatOfPoint2f( temp_contour.toArray() );

                int contourSize = (int)temp_contour.total();
                MatOfPoint2f approxCurve_temp = new MatOfPoint2f();
                Imgproc.approxPolyDP(new_mat, approxCurve_temp, contourSize*0.05, true);

                if (approxCurve_temp.total() == 4) {
                    MatOfPoint points = new MatOfPoint( approxCurve_temp.toArray() );
                    Rect rect = Imgproc.boundingRect(points);
                    Core.rectangle(imgSource, new Point(rect.x,rect.y), new Point(rect.x+rect.width,rect.y+rect.height), new Scalar(255, 0, 0, 255), 3);

                }

        }
        Bitmap analyzed=Bitmap.createBitmap(imgSource.cols(),imgSource.rows(),Bitmap.Config.ARGB_8888);
        Utils.matToBitmap(imgSource,analyzed);


        if(!myDir.exists()) myDir.mkdirs();

        fname = "ImageAnalyzed.png";
        file = new File (myDir, fname);
        if (file.exists ()) file.delete ();
        try {
            FileOutputStream out = new FileOutputStream(file);
            analyzed.compress(Bitmap.CompressFormat.PNG, 100, out);
            out.flush();
            out.close();

        } catch (Exception e) {
            e.printStackTrace();
        }

结果照片未正确分析，它返回给我一张这样的照片：

有没有人知道如何解决它？

提前致谢，法比奥

修改

我发现使用ImgProc.APPROX_CHAIN_NONE而不是ImgProc.APPROX_CHAIN_SIMPLE给了我更好的结果......现在我必须调整canny阈值以使程序与我分析的图像类型无关。我认为使用图像的均值或中值也会给我更好的结果。

在Android

0 个答案: