Apache Spark 集成

您可以使用 Vertica Connector for Apache Spark 在 Vertica 与 Apache Spark 之间传输数据。下表显示了连接器支持的 Apache Spark 和 Scala 版本,以及每个组合需要使用的 Spark 连接器 JAR 文件的名称:

\* Vertica 正逐步停止为此 Apache Spark 版本提供支持。有关详细信息,请参阅支持终止声明

注意

  • Spark 连接器 JAR 文件可以支持多个 Spark 版本。例如,vertica-spark2.1_scala2.11.jar 支持 Spark 2.1、2.2、2.3 和 2.4.1。

  • Vertica 建议您始终使用 Vertica 服务器版本随附的 Spark 连接器版本。升级 Vertica 服务器时,还应升级 Spark 连接器版本。

有关 Apache Spark 集成的详细信息,请参阅 Apache Spark 集成