apache beam教程_由于向导无法找到需要的软件

今天在集群上实验Beam On Spark的时候，遇到一个坑爹的问题，这个问题总结起来是一个java.lang.NoClassDefFoundError

错误，具体错误如下图1所示

图1 错误提示

该错误提示SparkStreamingContext没有定义，这说明java虚拟机加载进来了SparkStreamingContext，也就是相应的代码包已经导入进来了，这个阶段没有什么问题。接下来就得看看是不是代码包版本不合适。

我的maven依赖如下图2所示

图2 Maven依赖包

于是我在各种尝试之后，终于找到了一种有希望的解决方案，那就是将spark的版本2.1.0改为1.6.3版本。

修改后状况如下：

图3 本地运行成功

这里看似成功了，但是这只是在本机测试的时候有了Beam On Spark的运行

今天的文章apache beam教程_由于向导无法找到需要的软件分享到此就结束了，感谢您的阅读。