- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我正在与 Pandas 打交道。我的目标是将数据框中的多个列从包含 NaN 或字符串数据转换为或多或少的虚拟变量(0 表示 NaN;1 表示任何字符串)。我想在不使用完整的字符串列表并逐个替换它们的情况下执行此操作,因为存在拼写错误,这会导致错误。我已经能够使用 fillna 函数将所有 NaN 数据替换为 0,这就像做梦一样!
我希望有类似的东西将所有字符串数据替换为 1,但保留 0。我搜索了 stackoverflow 和其他地方,但收效甚微。
数据大致如下所示,我只希望将其应用于以 T_ 开头的列:
fol T_opp T_Dir T_Enh Activity
1 0 0 vo hf
2 vr 0 0 hx
2 0 0 0 fe
3 0 bt 0 rn
我希望输出看起来一样,但是“vr”、“bt”和“vo”分别替换为整数 1。据我所知,pd get_dummies 函数不是我想要的为了。我也无法使用 replace() 来完成这项工作。我尝试了一些使用 T/F 掩码和零列表的方法,但结果非常错误,我懒得在这里发布代码。
已编辑:我在上面的玩具数据中添加了一个附加列。 “事件”列是一些我不想触及的数据,也是字符串。
最佳答案
您可以使用带有正则表达式的 DataFrame.replace()
来做到这一点:
In [14]: df
Out[14]:
fol T_opp T_Dir T_Enh
0 1 0 0 vo
1 2 vr 0 0
2 2 0 0 0
3 3 0 bt 0
In [15]: df.replace(regex={'vr|bt|vo': '1'}).convert_objects(convert_numeric=True)
Out[15]:
fol T_opp T_Dir T_Enh
0 1 0 0 1
1 2 1 0 0
2 2 0 0 0
3 3 0 1 0
如果出于某种原因你反对 dict
,你也可以非常明确地表达出来:
In [19]: df.replace(regex='vr|bt|vo', value='1')
Out[19]:
fol T_opp T_Dir T_Enh
0 1 0 0 1
1 2 1 0 0
2 2 0 0 0
3 3 0 1 0
但等等还有更多!您可以通过传递嵌套的 dict
指定要操作的列(键 不能 是正则表达式,嗯,它们可以,但除了返回框架):
In [22]: df.replace({'T_opp': {'vr': 1}, 'T_Dir': {'bt': 1}})
Out[22]:
fol T_opp T_Dir T_Enh
0 1 0 0 vo
1 2 1 0 0
2 2 0 0 0
3 3 0 1 0
编辑:由于您要用数字 1
替换所有字符串(根据您在下面的评论),请执行以下操作:
In [23]: df.replace(regex={r'\D+': 1})
Out[23]:
fol T_opp T_Dir T_Enh
0 1 0 0 1
1 2 1 0 0
2 2 0 0 0
3 3 0 1 0
编辑:微基准测试可能在这里很有用:
安迪的方法(更快):
In [11]: timeit df.convert_objects(convert_numeric=True).fillna(1)
1000 loops, best of 3: 590 µs per loop
DataFrame.replace()
:
In [46]: timeit df.replace(regex={r'\D': 1})
1000 loops, best of 3: 801 µs per loop
如果您有包含要保留的字符串的列
In [45]: cols_to_replace = 'T_opp', 'T_Dir', 'T_Enh'
In [46]: d = dict(zip(cols_to_replace, [{r'\D': 1}] * len(cols_to_replace)))
In [47]: d
Out[47]: {'T_Dir': {'\\D': 1}, 'T_Enh': {'\\D': 1}, 'T_opp': {'\\D': 1}}
In [48]: df.replace(d)
Out[48]:
fol T_opp T_Dir T_Enh Activity
0 1 0 0 1 hf
1 2 1 0 0 hx
2 2 0 0 0 fe
3 3 0 1 0 rn
另一种方法是使用 filter
并在替换后将结果连接在一起:
In [10]: df
Out[10]:
fol T_opp T_Dir T_Enh Activity
0 1 0 0 vo hf
1 2 vr 0 0 hx
2 2 0 0 0 fe
3 3 0 bt 0 rn
In [11]: filtered = df.filter(regex='T_.+')
In [12]: res = filtered.replace({'\D': 1})
In [13]: res
Out[13]:
T_opp T_Dir T_Enh
0 0 0 1
1 1 0 0
2 0 0 0
3 0 1 0
In [14]: not_filtered = df[df.columns - filtered.columns]
In [15]: not_filtered
Out[15]:
Activity fol
0 hf 1
1 hx 2
2 fe 2
3 rn 3
In [16]: res.join(not_filtered)
Out[16]:
T_opp T_Dir T_Enh Activity fol
0 0 0 1 hf 1
1 1 0 0 hx 2
2 0 0 0 fe 2
3 0 1 0 rn 3
请注意,列的原始顺序不会保留。
您可以使用正则表达式来搜索列名,如果您要保留许多列,这可能比显式构建列表更有用。 -
运算符在与两个 Index
对象(df.columns
是一个 Index
)一起使用时执行集合差异。
之后您可能需要调用 DataFrame.convert_objects()
除非您的列是字符串/整数混合列。我的解决方案假定它们都是字符串,因此我调用 convert_objects()
将值强制转换为 int
dtype
。
关于python - 用 1 替换列中的任何字符串,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19191832/
如何使用 SPListCollection.Add(String, String, String, String, Int32, String, SPListTemplate.QuickLaunchO
我刚刚开始使用 C++ 并且对 C# 有一些经验,所以我有一些一般的编程经验。然而,似乎我马上就被击落了。我试过在谷歌上寻找,以免浪费任何人的时间,但没有结果。 int main(int argc,
这个问题已经有答案了: In Java 8 how do I transform a Map to another Map using a lambda? (8 个回答) Convert a Map>
我正在使用 node + typescript 和集成的 swagger 进行 API 调用。我 Swagger 提出以下要求 http://localhost:3033/employees/sear
我是 C++ 容器模板的新手。我收集了一些记录。每条记录都有一个唯一的名称,以及一个字段/值对列表。将按名称访问记录。字段/值对的顺序很重要。因此我设计如下: typedef string
我需要这两种方法,但j2me没有,我找到了一个replaceall();但这是 replaceall(string,string,string); 第二个方法是SringBuffer但在j2me中它没
If string is an alias of String in the .net framework为什么会发生这种情况,我应该如何解释它: type JustAString = string
我有两个列表(或字符串):一个大,另一个小。 我想检查较大的(A)是否包含小的(B)。 我的期望如下: 案例 1. B 是 A 的子集 A = [1,2,3] B = [1,2] contains(A
我有一个似乎无法解决的小问题。 这里...我有一个像这样创建的输入... var input = $(''); 如果我这样做......一切都很好 $(this).append(input); 如果我
我有以下代码片段 string[] lines = objects.Split(new string[] { "\r\n", "\n" }, StringSplitOptions.No
这可能真的很简单,但我已经坚持了一段时间了。 我正在尝试输出一个字符串,然后输出一个带有两位小数的 double ,后跟另一个字符串,这是我的代码。 System.out.printf("成本:%.2
以下是 Cloud Firestore 列表查询中的示例之一 citiesRef.where("state", ">=", "CA").where("state", "= 字符串,我们在Stack O
我正在尝试检查一个字符串是否包含在另一个字符串中。后面的代码非常简单。我怎样才能在 jquery 中做到这一点? function deleteRow(locName, locID) { if
这个问题在这里已经有了答案: How to implement big int in C++ (14 个答案) 关闭 9 年前。 我有 2 个字符串,都只包含数字。这些数字大于 uint64_t 的
我有一个带有自定义转换器的 Dozer 映射: com.xyz.Customer com.xyz.CustomerDAO customerName
这个问题在这里已经有了答案: How do I compare strings in Java? (23 个回答) 关闭 6 年前。 我想了解字符串池的工作原理以及一个字符串等于另一个字符串的规则是
我已阅读 this问题和其他一些问题。但它们与我的问题有些无关 对于 UILabel 如果你不指定 ? 或 ! 你会得到这样的错误: @IBOutlet property has non-option
这两种方法中哪一种在理论上更快,为什么? (指向字符串的指针必须是常量。) destination[count] 和 *destination++ 之间的确切区别是什么? destination[co
This question already has answers here: Closed 11 years ago. Possible Duplicates: Is String.Format a
我有一个Stream一个文件的,现在我想将相同的单词组合成 Map这很重要,这个词在 Stream 中出现的频率. 我知道我必须使用 collect(Collectors.groupingBy(..)
我是一名优秀的程序员,十分优秀!