数据库也是 spark 数据源创建 df 的一种方式,因为比较重要,所以单独算一节. 本文以 postgres 为例 安装 JDBC 首先需要 安装 postgres 的客户端驱动,即 JDBC 驱动,这是官方下载地址,JDBC,根据数据库版本下载对应的驱动 上传至 spark 目录下的 jars 目录 并设置环境变量 export SPARK_CLASSPATH = /usr/lib/spark/jars 编程模板 如何操作数据库,不同的版本方法不同,网上的教程五花八门,往往尝试不成功. 其实…