【求助】历史任务中查不到spark streaming的任务

大家好：
问个问题。    我spark on yarn中跑spark streaming，为什么我在历史服务（18088）查不到这个任务 ？
这是我的提交脚本
spark-submit --driver-memory 1g --executor-memory 1g --executor-cores 1  --num-executors 3 --class com.yhx.sensor.sparkstreaming.LogicHandle --master yarn /opt/spark/SparkStreaming.jar

确保服务正确提交

然后检查下配置，只要是页面能显示，一般都能看到的。

<property> 
<description>The address of the RM web application.</description> 
<name>Yarn.resourcemanager.webapp.address</name> 
<value>ip:18088</value> 
</property>
复制代码

或则到相应的目录下，看看是否有这个信息。

jixianqiuxue 发表于 2014-12-25 13:46
确保服务正确提交

然后检查下配置，只要是页面能显示，一般都能看到的。

我在8088中是可以看到sparkstreaming的， 18088也是可以正常访问的。 但是，就是当我停下sparkstreaming后，18088中看不到这个任务。。。。 我是CDH环境下

lixiaoliang7 发表于 2014-12-25 18:02
我在8088中是可以看到sparkstreaming的， 18088也是可以正常访问的。 但是，就是当我停下sparkstreaming ...

可以尝试其他任务，看是否能够看到。如果能够看到，说明这可能是yarn的一个bug.

jixianqiuxue 发表于 2014-12-25 14:08
可以尝试其他任务，看是否能够看到。如果能够看到，说明这可能是yarn的一个bug.

好的，多谢，我测试一下。
现在有别的事情要处理，回头如果有一个测试结果后，还会来该贴子中留言说明情况的。