Hadoop启动时出现Unrecognized option: -jvm 和 Could not create the Java virtual machine

scuess

http://javoft.net/2011/06/hadoop-unrecognized-option-jvm-could-not-create-the-java-virtual-machine/

?

根据官方文档配置单节点的时候，在运行sh start-all.sh时遇到出现问题：

<br>localhost: starting datanode, logging to /usr/local/hadoop/bin/../logs/hadoop-root-datanode-fedora.out<br>localhost: Unrecognized option: -jvm<br>localhost: Could not create the Java virtual machine.<br>

在网上搜到很多 Could not create the Java virtual machine.都是说内存分配不够或者其他的问题，跟Hadoop相关的不多。搜了很多最后找到了这个问题的原因，首先说一下我安装过程。

因为是本机，所以为了方便加上习惯性su开启root运行，故同样也用root来运行start-all.sh，于是上面问题出现了，到网上搜了，有人说改/hadoop/conf/hadoop-env.sh中的

<br># The maximum amount of heap to use, in MB. Default is 1000.<br># export HADOOP_HEAPSIZE=2000<br>

把 HADOOP_HEAPSIZE的值设为一个更小的，当然这样说的人肯定是以为jvm不能启动是因为内存大小没满足1000的要求，内存不足使得Could not create the Java virtual machine，看起来貌似有道理，但是怎么解释-jvm的问题呢？动手改改看，改过以后，无果，至少说明我遇到的不是这问题。继续搜，最后发现是在hadoop/bin/hadoop中有如下一段shell:

</strong>

<div>
<div id="highlighter_659935" class="syntaxhighlighter  shell ie">
<div class="toolbar"><span><a class="toolbar_item command_help help" href="#">?</a></span>
<table border="0" cellspacing="0" cellpadding="0"><tbody><tr>
<td class="gutter">
<div class="line number1 index0 alt2">1
<div class="line number2 index1 alt1">2
<div class="line number3 index2 alt2">3
<div class="line number4 index3 alt1">4
<div class="line number5 index4 alt2">5
<div class="line number6 index5 alt1">6
</td>
<td class="code">
<div class="container">
<div class="line number1 index0 alt2">
<code class="shell plain">CLASS=</code><code class="shell string">'org.apache.hadoop.hdfs.server.datanode.DataNode'</code>

<div class="line number2 index1 alt1">
<code class="shell keyword">if</code> <code class="shell plain">[[ $EUID -</code><code class="shell keyword">eq</code> <code class="shell plain">0 ]]; </code><code class="shell keyword">then</code>

<div class="line number3 index2 alt2">
<code class="shell plain">HADOOP_OPTS=</code><code class="shell string">"$HADOOP_OPTS -jvm server $HADOOP_DATANODE_OPTS"</code>

<div class="line number4 index3 alt1"><code class="shell keyword">else</code>
<div class="line number5 index4 alt2">
<code class="shell plain">HADOOP_OPTS=</code><code class="shell string">"$HADOOP_OPTS -server $HADOOP_DATANODE_OPTS"</code>

<div class="line number6 index5 alt1"><code class="shell keyword">fi</code>

</td>
</tr></tbody></table>


?

其中的<br><strong><br>如果 $EUID 为 0，什么意思呢?<br>有效用户标识号（EUID）：该标识号负责标识以什么用户身份来给新创建的进程赋所有权、检查文件的存取权限和检查通过系统调用kill向进程发送软 中断信号的许可权限。<br>在root用户下echo $EUID，echo结果为 0<br>ok，在root下会有-jvm选项添加上去，上面说的Unrecognized option: -jvm难道就是这里产生的。

<div>
<div id="highlighter_690401" class="syntaxhighlighter  shell ie">
<div class="toolbar"><span><a class="toolbar_item command_help help" href="#">?</a></span>
<table border="0" cellspacing="0" cellpadding="0"><tbody><tr>
<td class="gutter">
<div class="line number1 index0 alt2">1
<div class="line number2 index1 alt1">2
</td>
<td class="code">
<div class="container">
<div class="line number1 index0 alt2">
<code class="shell keyword">if</code> <code class="shell plain">[[ $EUID -</code><code class="shell keyword">eq</code> <code class="shell plain">0 ]]; </code><code class="shell keyword">then</code>

<div class="line number2 index1 alt1">
<code class="shell plain">HADOOP_OPTS=</code><code class="shell string">"$HADOOP_OPTS -jvm server $HADOOP_DATANODE_OPTS"</code>


</td>
</tr></tbody></table>


?

两个想法。一个想法是自己改了这shell代码，去掉里面的-jvm。另外一个想法是 既然这里要求 $EUID -eq 0，那别用$EUID不为0的（root用户）用户运行即可。果断试试，换上普通用户根据文档提示做。ok，成功。好奇的再试试第一个想法，其实暂时还是不太想动源码。但是这shell动动也没妨，果断去掉上面的-jvm，直接把上面的if else 结构直接去掉改为

<div>
<div id="highlighter_50567" class="syntaxhighlighter  shell ie">
<div class="toolbar"><span><a class="toolbar_item command_help help" href="#">?</a></span>
<table border="0" cellspacing="0" cellpadding="0"><tbody><tr>
<td class="gutter">
<div class="line number1 index0 alt2">1
</td>
<td class="code">
<div class="container">
<div class="line number1 index0 alt2">
<code class="shell plain">HADOOP_OPTS=</code><code class="shell string">"$HADOOP_OPTS -server $HADOOP_DATANODE_OPTS"</code><code class="shell plain">，</code>


</td>
</tr></tbody></table>


同样运行成功。

如上几个尝试最终证明问题就出现在与-jvm这个参数选项，这是由于Hadoop版本或者java版本差异产生的问题吗？继续研究中…