- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我有 Spark 数据帧,其中时间戳以毫秒为单位。
+-----------------------+
|CALC_TS |
+-----------------------+
|2021-01-27 01:35:05.043|
|2021-01-27 01:35:05.043|
|2021-01-27 01:35:05.043|
我想让它像这样显示微秒:
+--------------------------+
|CALC_TS |
+--------------------------+
|2021-01-27 01:35:05.043000|
|2021-01-27 01:35:05.043000|
|2021-01-27 01:35:05.043000|
所以基本上我希望毫秒部分以微秒为单位显示。在上面的示例中,第一个数据帧的 43
毫秒将是 43000
微秒,如秒数据帧所示。
我已经尝试过:
df.withColumn('TIME', to_timestamp('CALC_TS', 'yyyy-MM-dd HH:mm:ss.SSSSSS'))
和
df.withColumn('TIME', col('CALC_TS').cast("timestamp"))
但是他们给出了相同的结果并去掉了最后 3 个零。有没有办法实现这个目标?
最佳答案
to_timestamp(timestamp_str[,fmt])
接受一个字符串并返回一个时间戳(类型)。如果您CALC_TS
正如你所说,已经是一个时间戳,你应该使用 df.withColumn('TIME', date_format('CALC_TS','yyyy-MM-dd HH:mm:ss.SSSSSS'))
将其格式化为字符串,精度为微秒。来自 Spark reference :
o Fraction: Use one or more (up to 9) contiguous 'S' characters, e,gSSSSSS, to parse and format fraction of second. For parsing, theacceptable fraction length can be [1, the number of contiguous ‘S’].For formatting, the fraction length would be padded to the number ofcontiguous ‘S’ with zeros. Spark supports datetime of micro-of-secondprecision, which has up to 6 significant digits, but can parsenano-of-second with exceeded part truncated.
对于 Spark 2.4,为了使其看起来时间戳字段的精度为微秒,也许您可以在格式化时“伪造”尾随零,如下所示:date_format('CALC_TS','yyyy-MM-dd HH:mm:ss.SSS000')
关于apache-spark - 如何阻止 pyspark 中的时间戳删除尾随零,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/65945976/
给定一个带有多个 date_time 戳的字符串,我想 提取第一个戳及其前面的文本 候选字符串可以有一个或多个时间戳 后续的 date_time 戳记将被 sep="-" 隔开 后续date_time
是否可以合并从相机拍摄的文本和照片?我想在照片上标记日期和时间,但我在 Google 上找不到任何内容。 最佳答案 使用下面的代码来实现你所需要的。 Bitmap src = Bitm
有没有办法通过 Graph API 戳另一个用户?基于this post ,并使用 Graph Explorer ,我发布到“/USERID/pokes”,我已经授予它(Graph API 应用程序和
我有两个向左浮动的元素。一个是 body 的第一个 child ,另一个是容器的第一个 child ,容器是 body 的第二个 child 。 ...
我是一名优秀的程序员,十分优秀!