PDFBox:提取文本时维护PDF结构

时间:2017-08-23 13:16:20

标签: java pdfbox

我正在尝试从充满表格的PDF中提取文本。 在某些情况下,列是空的。 当我从PDF中提取文本时,emptys列被滑动并被空格替换,因此,我的常规表达式无法确定在该点上有一个没有信息的列。

图片以便更好地理解:

Image of PDF source and extracted text

我们可以看到在提取的文本中没有遵守列

从PDF中提取文本的代码示例:

PDFTextStripper reader = new PDFTextStripper();
            reader.setSortByPosition(true);
            reader.setStartPage(page);
            reader.setEndPage(page);
            String st = reader.getText(document);
            List<String> lines = Arrays.asList(st.split(System.getProperty("line.separator")));

如何在从中提取文本时保持原始PDF的完整结构?

非常感谢。

1 个答案:

答案 0 :(得分:2)

(原来是the answer (dated Feb 6 '15) to another question,OP删除了所有答案。由于年龄的原因,答案中的代码仍然基于PDFBox 1.8.x,因此可能需要进行一些更改它使用PDFBox 2.0.x运行。)

在评论中,OP表示对解决方案感兴趣扩展PDFBox PDFTextStripper以返回试图反映PDF文件布局的文本行,这可能有助于手头的问题

概念验证就是这个类:

public class LayoutTextStripper extends PDFTextStripper
{
    public LayoutTextStripper() throws IOException
    {
        super();
    }

    @Override
    protected void startPage(PDPage page) throws IOException
    {
        super.startPage(page);
        cropBox = page.findCropBox();
        pageLeft = cropBox.getLowerLeftX();
        beginLine();
    }

    @Override
    protected void writeString(String text, List<TextPosition> textPositions) throws IOException
    {
        float recentEnd = 0;
        for (TextPosition textPosition: textPositions)
        {
            String textHere = textPosition.getCharacter();
            if (textHere.trim().length() == 0)
                continue;

            float start = textPosition.getTextPos().getXPosition();
            boolean spacePresent = endsWithWS | textHere.startsWith(" ");

            if (needsWS | spacePresent | Math.abs(start - recentEnd) > 1)
            {
                int spacesToInsert = insertSpaces(chars, start, needsWS & !spacePresent);

                for (; spacesToInsert > 0; spacesToInsert--)
                {
                    writeString(" ");
                    chars++;
                }
            }

            writeString(textHere);
            chars += textHere.length();

            needsWS = false;
            endsWithWS = textHere.endsWith(" ");
            try
            {
                recentEnd = getEndX(textPosition);
            }
            catch (IllegalArgumentException | IllegalAccessException | NoSuchFieldException | SecurityException e)
            {
                throw new IOException("Failure retrieving endX of TextPosition", e);
            }
        }
    }

    @Override
    protected void writeLineSeparator() throws IOException
    {
        super.writeLineSeparator();
        beginLine();
    }

    @Override
    protected void writeWordSeparator() throws IOException
    {
        needsWS = true;
    }

    void beginLine()
    {
        endsWithWS = true;
        needsWS = false;
        chars = 0;
    }

    int insertSpaces(int charsInLineAlready, float chunkStart, boolean spaceRequired)
    {
        int indexNow = charsInLineAlready;
        int indexToBe = (int)((chunkStart - pageLeft) / fixedCharWidth);
        int spacesToInsert = indexToBe - indexNow;
        if (spacesToInsert < 1 && spaceRequired)
            spacesToInsert = 1;

        return spacesToInsert;
    }

    float getEndX(TextPosition textPosition) throws IllegalArgumentException, IllegalAccessException, NoSuchFieldException, SecurityException
    {
        Field field = textPosition.getClass().getDeclaredField("endX");
        field.setAccessible(true);
        return field.getFloat(textPosition);
    }

    public float fixedCharWidth = 3;

    boolean endsWithWS = true;
    boolean needsWS = false;
    int chars = 0;

    PDRectangle cropBox = null;
    float pageLeft = 0;
}

它的用法如下:

PDDocument document = PDDocument.load(PDF);

LayoutTextStripper stripper = new LayoutTextStripper();
stripper.setSortByPosition(true);
stripper.fixedCharWidth = charWidth; // e.g. 5

String text = stripper.getText(document);

fixedCharWidth是假定的字符宽度。根据相关PDF中的书写,不同的值可能更适合。在我的样本文件中,感兴趣的是3..6的值。

它基本上模仿了this answer中iText的类似解决方案。但是,结果略有不同,因为iText文本提取转发文本块,而PDFBox文本提取转发单个字符。

请注意,这仅仅是一个概念验证。它特别不考虑任何轮换