Apache Beam中对SparkRunner的Python支持
作者：互联网
是否支持使用Apache Beam和SparkRunner运行python程序？
该文档似乎没有：https://beam.apache.org/get-started/wordcount-example/#apache-spark-runner
当我查看API参考时
https://beam.apache.org/documentation/sdks/pydoc/0.6.0/apache_beam.runners.html我在那里找不到任何提及SparkRunner的信息.
我相信有人提到并支持Java,但我想知道python支持吗？
解决方法:
目前,不支持在Apache Spark上运行使用Apache Beam的Python SDK构建的管道.但是,这项工作正在进行中,体现在Apache Beam可移植性框架中.
敬请期待-这是应该很快就会推出的东西！
标签：apache-spark,apache-beam,python 来源： https://codeday.me/bug/20191026/1933101.html