许多插入后Hibernate变慢

时间:2017-10-26 16:43:28

标签: java mysql hibernate

我遇到了问题。在我的解决方案中,我需要将数千个数据插入数据库。我正在使用批量准备语句在一个请求中插入许多行。在我多次调用插入后,休眠变得更慢。

我猜它会在我的提交后检查数据库的变化。也许我需要tel hibernate不要这样做,但是idk如何。

Session session = em.unwrap(Session.class);
        while (!stop) {
            if (data.size() == 0) {
                try {
                    t.sleep(100); // další kontrola fronty
                } catch (InterruptedException e) {
                    e.printStackTrace();
                }
            } else {
                session.doWork(new Work() {
                    @Override
                    public void execute(Connection connection) throws SQLException {
                        try {
                            PreparedStatement ps = connection.prepareStatement("INSERT INTO data_data (Data_channelId,Data_nodeAddress,Data_subsystemId,data) VALUES (?,?,?,?)");
                            int pocet = data.size();
                            for (int i = 0; i < pocet; i++) {
                                Data item = data.get(0);
                                try {
                                    ps.setByte(1, item.getGlobal_id().getChannelId());
                                    ps.setShort(2, item.getGlobal_id().getNodeAddress());
                                    ps.setInt(3, item.getGlobal_id().getSubsystemId());
                                    ps.setDouble(4, item.getData().get(0));
                                    ps.addBatch();
                                } catch (SQLException e) {
                                    e.printStackTrace();
                                }
                                data.remove(0);
                            }
                            ps.executeBatch();
                            System.out.println(System.currentTimeMillis() + " Commited: " + pocet);

                        } catch (SQLException e) {
                            e.printStackTrace();
                        }
                    }
                });
                session.clear();

                try {
                    t.sleep(100); // Zjistit, zda je úspornější nechat větší frontu, nebo ne
                } catch (InterruptedException e) {
                    e.printStackTrace();
                }
            }
        }

当我不使用来自hibernate的会话但是另外一个简单的连接con = DriverManager.getConnection(...然后它工作正常。

感谢您的帮助。

1 个答案:

答案 0 :(得分:0)

顺序中的许多插入会导致休眠逐渐减慢。这是因为您插入的行将保留在会话中,直到会话关闭或会话被刷新并清除。 我无法理解为什么你用这种方式编码,但我建议你在定期间隔之后在for循环中调用session.flush()和session.clear()。例如,如果要将批处理大小保持为20并且记录数为10000,则在每提取20条记录后调用flush和clear方法。这将大大提高性能。