作者热门文章
- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
很抱歉,如果这听起来很模糊,但可以解释一下将现有 DataFrame“df”写入 MySQL 表“product_mysql”的步骤,反之亦然。
最佳答案
请参阅this databricks article : Connecting to SQL Databases using JDBC.
import org.apache.spark.sql.SaveMode
val df = spark.table("...")
println(df.rdd.partitions.length)
// given the number of partitions above, users can reduce the partition value by calling coalesce() or increase it by calling repartition() to manage the number of connections.
df.repartition(10).write.mode(SaveMode.Append).jdbc(jdbcUrl, "product_mysql", connectionProperties)
关于scala - 如何将DataFrame写入MySQL表,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/47213167/
我是一名优秀的程序员,十分优秀!