Java程序去调用并执行shell脚本及问题总结(推荐)_java执行shell命令资源-CSDN文库

版权申诉

java调用并执行shell脚本

5星 · 超过95%的资源 16 浏览量 2020-08-19 02:09:06 上传评论收藏 81KB PDF 举报

资源推荐

资源详情

资源评论

Java程序去调用并执行程序去调用并执行shell脚本及问题总结脚本及问题总结(推荐推荐)

主要介绍了Java程序去调用并执行shell脚本及问题总结,本文给大家介绍的非常详细，对大家的学习或工作具有

一定的参考借鉴价值，需要的朋友可以参考下

摘要：该文章来自阿里巴巴技术协会（ATA）精选集背景我们在开发过程中，大部分是java开发，而在文本处理过程中，主

要就是脚本进行开发。 java开发的特点就是我们可以很早地进行TDDL， METAQ 等等地对接；而脚本开发的特点就是在进

行批处理的时候非常方便。

背景背景

我们在开发过程中，大部分是java开发，而在文本处理过程中，主要就是脚本进行开发。 java开发的特点就是我们可以很早

地进行TDDL， METAQ 等等地对接；而脚本开发的特点就是在进行批处理的时候非常方便。前阵子我遇到这么一个需求场

景：对抓取的数据进行打包，后来又遇到我要通过脚本进行抓取，比如nodejs下基于phantomjs的casperjs爬虫。

解决方法解决方法

对于第一个问题：java抓取，并且把结果打包。

那么比较直接的做法就是，java接收各种消息（db，metaq等等），然后借助于jstorm集群进行调度和抓取。最后把抓取的结

果保存到一个文件中，并且通过调用shell打包，回传。也许有同学会问，为什么不直接把java调用odps直接保存文件，答案

是，我们的集群不是hz集群，直接上传odps速度很有问题，因此先打包比较合适。（这里不纠结设计了，我们回到正题）

java调用调用shell的方法的方法

通过ProcessBuilder进行调度

这种方法比较直观，而且参数的设置也比较方便，比如我在实践中的代码(我隐藏了部分业务代码)：

ProcessBuilder pb = new ProcessBuilder("./" + RUNNING_SHELL_FILE, param1,

param2, param3);

pb.directory(new File(SHELL_FILE_DIR));

int runningStatus = 0;

String s = null;

try {

Process p = pb.start();

try {

runningStatus = p.waitFor();

} catch (InterruptedException e) {

}

} catch (IOException e) {

}

if (runningStatus != 0) {

}

return;

这里有必要解释一下几个参数：

RUNNING_SHELL_FILE：要运行的脚本

SHELL_FILE_DIR：要运行的脚本所在的目录；当然你也可以把要运行的脚本写成全路径。

runningStatus：运行状态，0标识正常。详细可以看java文档。

param1, param2, param3：可以在RUNNING_SHELL_FILE脚本中直接通过1,2,$3分别拿到的参数。

直接通过系统直接通过系统Runtime执行执行shell

这个方法比较暴力，也比较常用，代码如下：

p = Runtime.getRuntime().exec(SHELL_FILE_DIR + RUNNING_SHELL_FILE + " "+param1+" "+param2+" "+param3);

p.waitFor();

我们发现，通过Runtime的方式并没有builder那么方便，特别是参数方面，必须自己加空格分开，因为exec会把整个字符串作

为shell运行。

可能存在的问题以及解决方法可能存在的问题以及解决方法

如果你觉得通过上面就能满足你的需求，那么可能是要碰壁了。你会遇到以下情况。

没权限运行

这个情况我们团队的朱东方就遇到了，在做DTS迁移的过程中，要执行包里面的shell脚本，解压出来了之后，发现执行不

了。那么就按照上面的方法授权吧

ProcessBuilder builder = new ProcessBuilder("/bin/chmod", "755", tempFile.getPath());

Process process = builder.start();

本内容试读结束，登录后可阅读更多

下载后可阅读完整内容，剩余2页未读，立即下载

内容反馈

版权申诉

fengshi008

2022-10-28

资源内容总结的很到位，内容详实，很受用，学到了~

weixin_38732343

粉丝: 5
资源: 909

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈

feedback-tip