在Windows 10上安装Spark之后出现问题

时间:2017-05-14 12:22:56

标签: scala hadoop apache-spark

这是我在运行spark-shell命令(C:\ Spark> spark-shell)后看到的cmd日志。据我了解,它主要是Hadoop的一个问题。我使用的是Windows 10.以某种方式请问以下问题吗?

<div ng-repeat="(key, value) in $parent.item.detailedPlan track by $index">
  <ul contenteditable="true" class="plan-actions" data-placeholder="Add Plan ...">
    <li ng-repeat="planItem in value" ng-show="(key+1)==$parent.dayItem.value">
      {{planItem}}
    </li>
  </ul>
</div>

1 个答案:

答案 0 :(得分:1)

输出中没有问题。这些WARN消息可以简单地忽略。

换句话说,看起来就像你在Windows 10上正确安装Spark 2.1.1一样。

要确保您正确安装(因此我可以从上面的句子中删除外观),请执行以下操作:

spark.range(1).show

默认情况下,由于Hadoop的要求(因此需要winutils.exe来处理它们),因此会触发加载Hive类,这些类可能会或可能不会在Windows上出现异常。