使用Weka对作者博客性别进行分类

时间:2013-08-30 02:52:31

标签: java excel machine-learning weka

我正在尝试使用Java中的Weka将作者的博客分类为由男性或女性撰写。我构建了一个名为Weka的类,它定义了在训练集中使用的属性,然后调用一个方法从excel表中加载所有已知数据。文件中的数据组织如下:每行在单元格0中有博客文本,然后在单元格1中有M或F。

博客文字M. 更多文字F

我也在关注本教程Weka Java Tutorial

当我运行程序时,我开始在eclipse的控制台窗口中看到文本突然显示,但突然出现一个红色错误,上面写着“没有为给定的名义属性定义值!”我不太清楚为什么会这样。文本在行之间变化,所以我认为无法定义所有名义属性。任何人都可以看到我做错了什么或在这里傻???我非常感谢任何帮助。我已经坚持了几个小时。

CODE:

    public class Weka
{
    static FastVector fvWekaAttributes;
    static Instances isTrainingSet;
    static Classifier cModel;

    public static void main(String[] args) throws Exception
    {



        // Declaring attributes
        Attribute stringAttribute = new Attribute("text", (FastVector) null);

        // Declaring a class attribute along with values
        FastVector fastVClassVal = new FastVector(2);
        fastVClassVal.addElement("M");
        fastVClassVal.addElement("F");

        Attribute classAttribute = new Attribute("theClass", fastVClassVal);

        // Declaring the feature vector
        fvWekaAttributes = new FastVector(2);
        fvWekaAttributes.addElement(stringAttribute);
        fvWekaAttributes.addElement(classAttribute);

        // create the training set
        isTrainingSet = new Instances("Rel", fvWekaAttributes, 10);

        // set class index
        isTrainingSet.setClassIndex(1);

        // create however many instances is in my excel file
        // and add it to the training set in a loop.
        Weka.LoadExcelWorkBook(isTrainingSet);
        Weka.TestSetWork();

    }

    public static void TestSetWork() throws Exception
    {
        // test the model
        Evaluation testing = new Evaluation(isTrainingSet);
        testing.evaluateModel(cModel, isTrainingSet);

        // printing the results....
        String strSummary = testing.toSummaryString();
        System.out.println(strSummary);

        // get confusion matrix.

        double[][] cmMatrix = testing.confusionMatrix();
        for (int i = 0; i < cmMatrix.length; i++)
        {
            for (int col = 0; col < cmMatrix.length; col++)
            {
                System.out.print(cmMatrix[i][col]);
                System.out.print("|");
            }
            System.out.println();
        }

    }

    public static void LoadExcelWorkBook(Instances trainingSet)
            throws Exception
    {
        System.out.println("LOADING EXCEL WORKBOOK!!!");
        Workbook wb = null;
        // opening excel file.

        try
        {
            wb = WorkbookFactory
                    .create(new File("C://blog-gender-dataset.xlsx"));

        } catch (IOException ieo)
        {
            ieo.printStackTrace();
        }

        // opening worksheet.
        Sheet sheet = wb.getSheetAt(0);

        StringToWordVector filter = new StringToWordVector();
        filter.setInputFormat(isTrainingSet);

        Instances dataFiltered = Filter.useFilter(isTrainingSet, filter);

        for (Row row : sheet)
        {

            Cell textCell = row.getCell(0);
            Cell MFCell = row.getCell(1);

            String blogText = textCell.getStringCellValue();
            String MFIndicator = MFCell.getStringCellValue();
            System.out.println("TEXT FROM EXCEL " + blogText);
            Instance iText = new Instance(2);

            iText.setValue((Attribute) fvWekaAttributes.elementAt(0), tweetText);
            iText.setValue((Attribute) fvWekaAttributes.elementAt(1),
                    MFIndicator);

            isTrainingSet.add(iText);

            cModel = (Classifier) new J48();
            cModel.buildClassifier(dataFiltered);

        }
    }

}

1 个答案:

答案 0 :(得分:0)

“没有为给定的名义属性定义值!”在您构造的实例中到达时,预期数据碰巧具有除您在给定标称属性的arff @attribute部分中定义的值之外的其他值。 例如,您将期望值定义为“M”或“F”,但您读取的值可能为空(N / A)等。 解决方案是严格验证您的数据,调试/跟踪为发生错误的属性加载的内容,并将该值添加到该属性的可能值 - 或者,如果在您的情况下系统地出现,则定义该属性属性为具有更通用的类型(字符串,数字,...)。