apache-spark - 通配符在 pyspark 数据框中不起作用

Question

当我执行以下代码片段时，df1 没有显示任何结果。当我用“1,2,3,..”替换通配符“*”时，df1 显示值。我错过了什么？

from __future__ import print_function
import sys
from pyspark import SparkContext
from pyspark.sql import SQLContext
from pyspark.sql import DataFrame
import pyspark.sql.functions
.
.
.
df1= df.filter(df.DATE == "*162014").filter(df.TMC == "111N04908")\
       .sort(df.EPOCH.asc())

Answer 1

只有 == 表示它等于 - 仅此而已。它不使用通配符、正则表达式或 SQL 模式。如果你想使用模式，请使用 LIKE或 RLIKE .

expr("DATE RLIKE '%162014'")
expr("DATE LIKE '*162014'")