MongoDB工具 >MongoDB Spark连接器 > Spark Connector Java指南
源代码
有关合并所有Java示例的源代码,请参见 JavaIntroduction.java。
向依赖项管理工具提供Spark Core,Spark SQL和MongoDB Spark Connector依赖项。
以下摘录来自Maven pom.xml
文件:
对于配置类,请使用Java友好create
方法而不是本机Scala apply
方法。
Java API提供了JavaSparkContext
一个SparkContext
从中获取一个
对象的对象SparkSession
。
通过指定连接器配置时SparkSession
,您必须在设置之前添加适当的前缀。有关详细信息和其他可用的MongoDB Spark Connector选项,请参阅“
配置选项”。
127.0.0.1
),数据库连接(test
),和收集(myCollection
)从中读取数据,读偏好。127.0.0.1
),数据库连接(test
),和收集(myCollection
)要写入的数据。您可以使用SparkSession
对象将数据写入MongoDB,从MongoDB读取数据,创建数据集以及执行SQL操作。
MongoSpark
帮手为了促进MongoDB和Spark之间的交互,MongoDB Spark Connector提供了com.mongodb.spark.api.java.MongoSpark
帮助器。