从关系型数据库中创建DataFrame
2022/8/28 2:24:00
本文主要是介绍从关系型数据库中创建DataFrame,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
- 说明:
/* 需要引入依赖 <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <version>8.0.18</version> </dependency> */
- 代码:
object MySQLToDataFrame { def main(args: Array[String]): Unit = { val sc = new SparkConf().setMaster("local[2]").setAppName("demo") val session = SparkSession.builder().config(sc).getOrCreate() val properties = new Properties() properties.put("driver", "com.mysql.cj.jdbc.Driver") properties.put("user", "root") properties.put("password", "Jsq123456...") val dataFrame = session.read.jdbc("jdbc:mysql://node1:3306/project?serverTimeznoe=UTC", "area_pvs", properties) dataFrame.show() } }
这篇关于从关系型数据库中创建DataFrame的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-05-0601-电商商品中心解密:仅凭SKU真的足够吗?
- 2024-05-01为什么公共事业机构会偏爱 TiDB :TiDB 数据库在某省妇幼健康管理系统的应用
- 2024-04-26敏捷开发:想要快速交付就必须舍弃产品质量?
- 2024-04-26静态代码分析的这些好处,我竟然都不知道?
- 2024-04-26你在测试金字塔的哪一层?(下)
- 2024-04-26快刀斩乱麻,DevOps让代码评审也自动起来
- 2024-04-262024年最好用的10款ER图神器!
- 2024-04-2203-为啥大模型LLM还没能完全替代你?
- 2024-04-2101-大语言模型发展
- 2024-04-17基于SpringWeb MultipartFile文件上传、下载功能