Question

我现在正在使用p5网络摄像头视频预测系统。当前，我正在尝试将其插入React应用程序以创建更完整的Web应用程序。

我的问题是，现在只能在我的p5草图中进行预测，我希望将预测值传递到React的App.js中以进行进一步的构造。有什么方法吗？

我正在使用react-p5-wrapper btw。

这是sketch.js：

import "react-p5-wrapper/node_modules/p5/lib/addons/p5.dom";
import ml5 from 'ml5';

let mobileNet;
let video;
let label='model loading...';

function sketch (p) {

    p.setup = function () {
        p.createCanvas(1000, 1000);
        //imitialize the webcam stream in a object
        video = p.createCapture(p.VIDEO);
        //hide the webcam stream
        video.hide();

        //initialize the mobilenet object with a callback
        mobileNet= ml5.imageClassifier('MobileNet',video,ModelLoaded);
    };

    p.draw = function () {
        p.image(video,0,0);
        p.textSize(16);
        p.fill(255,140,0);
        p.text(label,10,450);
    };
};

function ModelLoaded()
{
    console.log('Model is ready');
    //predicting the image
    mobileNet.predict(result)
}

//callback function to get the results
function result(err,res)
{
    //check for errors
    if(err)
    {
        //log the error if any
        console.error(err)
    }
    else{
        //get the label from the json result
        label = res[0].className;
    //predicting the image again
        mobileNet.predict(result)
    }
}


export default sketch;

我的App.js当前看起来像这样：

    import React, { Component } from 'react';
// import logo from './logo.svg';
import './App.css';
import sketch from './sketch';
import P5Wrapper from 'react-p5-wrapper';



class App extends Component {
  componentDidMount(){

  }
  render() {
    return (
      <div className="App">

        <P5Wrapper sketch={sketch} />
      </div>
    );
  }
}

export default App;

任何帮助表示赞赏！

Answer 1

我尝试了一下，并提出了解决方案。它不是很优雅，但应该可以。我在sketch.js中做了一个非常简单的测试项目，在这里我试图说明两种访问信息的方式。需要注意的是 timesClicked 变量和 myCustomRedrawAccordingToNewPropsHandler 函数。

export let timesClicked = 0;
export default function sketch (p) {

    p.setup = function () {
        p.createCanvas(300, 300);
    };

    p.draw = function () {
        p.background(0);
        p.fill(255);
        p.ellipse(p.mouseX, p.mouseY, 100, 100);
    };

    p.myCustomRedrawAccordingToNewPropsHandler = function(newProps){
        if(newProps.getCoords){
            p.sendCoords = newProps.getCoords;
        }
    }

    p.mouseClicked = function() {
        p.sendCoords(p.mouseX, p.mouseY);
        timesClicked++;
    }
};

timesClicked 是一个可以导入的变量，用于计算鼠标被点击的次数。可以从草图作用域内部对其进行修改，也可以从其他文件导入。

myCustomRedrawAccordingToNewPropsHandler 是每当组件收到 props 并可以在草图内定义的时候，从react-p5-wrapper库调用的函数。

这样，您的App.js文件可以像这样修改：

import React, { Component } from 'react';
import P5Wrapper from 'react-p5-wrapper';

import sketch from './sketch';

import {timesClicked} from './sketch';

function getCoords(){
    console.log(arguments);
}

class App extends Component {
    componentDidMount(){

    }
    render() {
        return (
            <div className="App">
                <P5Wrapper sketch={sketch} getCoords={getCoords}/>
            </div>
        );
    }
}

export default App;

document.body.onkeyup = function(e){
    if(e.keyCode == 32){
        console.log(timesClicked);
    }
}

运行时，每次单击时，草图将在App.js文件中执行 getCoords（）函数，或者，每次按下空格键时，都会执行 timesClicked 变量将从App.js文件中访问。我认为您可以修改此设置，以便“发送”或“读取”预测值。

将值从p5草图传递到React（使用react-p5-wrapper）

1 个答案: