微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

从关系型数据库中创建DataFrame

  • 说明:
/*
需要引入依赖
        <dependency>
            <groupId>MysqL</groupId>
            <artifactId>mysql-connector-java</artifactId>
            <version>8.0.18</version>
        </dependency>
 */
object MysqLToDataFrame {
  def main(args: Array[String]): Unit = {
    val sc = new SparkConf().setMaster("local[2]").setAppName("demo")
    val session = SparkSession.builder().config(sc).getorCreate()

    val properties = new Properties()
    properties.put("driver", "com.MysqL.cj.jdbc.Driver")
    properties.put("user", "root")
    properties.put("password", "Jsq123456...")
    val dataFrame = session.read.jdbc("jdbc:MysqL://node1:3306/project?serverTimeznoe=UTC", "area_pvs", properties)
    dataFrame.show()
  }
}

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐