如何远程从Java应用程序执行Hadoop命令

时间:2015-11-23 07:47:01

标签: java eclipse ubuntu hadoop jsch

你好我正在执行任何hadoop命令,例如" hadoop fs -ls"远程通过Java应用程序。我的本地计算机上有我的Java应用程序,虚拟机中有Hadoop。

首先,我建立一个ssh连接并工作。我也可以通过它正在运行的java代码执行linux命令,但hadoop命令不起作用,它会抛出以下错误。任何想法执行hadoop命令?

这是我的jsch计划

package com.jsch.test;
import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.util.Properties;

import com.jcraft.jsch.Channel;
import com.jcraft.jsch.ChannelExec;
import com.jcraft.jsch.JSch;
import com.jcraft.jsch.Session;

public class Jschtest {

public static void main(String[] args){

String command="hadoop fs -ls /";
try{         
     String host = "192.168.3.197"; //IP address of the remote server
     String user = "user";        // Username of the remote server
     String password = "HDP123!";  // Password of the remote server

     JSch jsch = new JSch();
     Session session = jsch.getSession(user, host, 22);
     Properties config = new Properties();
     config.put("StrictHostKeyChecking", "no");
     session.setConfig(config);;
     session.setPassword(password);
     session.connect();

     Channel channel = session.openChannel("exec");
     ((ChannelExec)channel).setCommand(command);
     channel.setInputStream(null);
     ((ChannelExec)channel).setErrStream(System.err);

     InputStream input = channel.getInputStream();
     channel.connect();

     System.out.println("Channel Connected to machine " + host + " server    
with command: " + command ); 

     try{
         InputStreamReader inputReader = new InputStreamReader(input);
         BufferedReader bufferedReader = new BufferedReader(inputReader);
         String line = null;

         while((line = bufferedReader.readLine()) != null){
             System.out.println(line);
         }
         bufferedReader.close();
         inputReader.close();
     }catch(IOException ex){
         ex.printStackTrace();
     }

     channel.disconnect();
     session.disconnect();
 }catch(Exception ex){
     ex.printStackTrace();
 }




}
}

这是我的错误讯息

频道使用以下命令连接到计算机192.168.3.197服务器:hadoop fs -ls /

bash:hadoop:找不到命令

2 个答案:

答案 0 :(得分:0)

如果您收到此错误“bash:hadoop:command not found”表示。操作系统无法识别Hadoop

您需要使用hadoop主目录更新“.bashrc”文件

答案 1 :(得分:0)

打开bashsrc并将Hadoop BIN文件夹路径添加到文件中的PATH变量。 运行source ~/.bashrc命令。

或者,您可以对命令变量进行以下更改:

command = usr/local/hadoop/bin/hadoop fs -ls