我正在尝试在hadoop集群中运行并行sqoop作业但是我们看到在并行运行期间sqoop作业失败并出现以下错误。
16/11/11 09:24:59 ERROR manager.SqlManager: Error executing statement: java.sql.SQLRecoverableException: IO Error: Connection reset
java.sql.SQLRecoverableException: IO Error: Connection reset
at oracle.jdbc.driver.T4CConnection.logon(T4CConnection.java:682)
at oracle.jdbc.driver.PhysicalConnection.<init>(PhysicalConnection.java:715)
at oracle.jdbc.driver.T4CConnection.<init>(T4CConnection.java:385)
at oracle.jdbc.driver.T4CDriverExtension.getConnection(T4CDriverExtension.java:30)
at oracle.jdbc.driver.OracleDriver.connect(OracleDriver.java:564)
at java.sql.DriverManager.getConnection(DriverManager.java:664)
at java.sql.DriverManager.getConnection(DriverManager.java:247)
at org.apache.sqoop.manager.OracleManager.makeConnection(OracleManager.java:327)
at org.apache.sqoop.manager.GenericJdbcManager.getConnection(GenericJdbcManager.java:52)
at org.apache.sqoop.manager.SqlManager.execute(SqlManager.java:744)
at org.apache.sqoop.manager.SqlManager.execute(SqlManager.java:767)
at org.apache.sqoop.manage
只有在hadoop中运行多个作业时才会出现错误。我正在搜索类似的错误,并遇到了这些链接。但关键是我们如何在sqoop Jobs中容纳这一点。
Oracle JDBC intermittent Connection Issue
非常感谢您对此的任何帮助。
答案 0 :(得分:0)
添加属性-Dmapred.child.java.opts =“ - Djava.security.egd = file:/// dev / urandom”后,此问题得以解决。
问题详情由Oracle JDBC intermittent Connection Issue
提供和
Oracle 11g connection reset error
感谢链接中的人提供的答案。