- Java锁的逻辑(结合对象头和ObjectMonitor)
- 还在用饼状图?来瞧瞧这些炫酷的百分比可视化新图形(附代码实现)⛵
- 自动注册实体类到EntityFrameworkCore上下文,并适配ABP及ABPVNext
- 基于Sklearn机器学习代码实战
本文介绍基于 Python 下 OneHotEncoder 与 pd.get_dummies 两种方法,实现机器学习中最优的编码方法—— 独热编码 的方法.
在数据处理与分析领域,对数值型与字符型 类别变量 加以 编码 是不可或缺的预处理操作;这里介绍两种不同的方法.
首先导入必要的模块.
import pandas as pd
from sklearn.preprocessing import OneHotEncoder
其中, OneHotEncoder 是我们实现独热编码的关键模块.
接下来,导入并显示数据前五行.
test_data_1=pd.read_csv('G:/CropYield/03_DL/00_Data/onehot_test.csv',names=['EVI0610','EVI0626','SoilType'],header=0)
test_data_1.head(5)
关于这里导入数据代码的解释,大家可以查看 多变量两两相互关系联合分布图的Python绘制 与 Python TensorFlow深度学习回归代码:DNNRegressor 这两篇文章,这里就不再赘述啦~ 。
数据前五行展示如下图。其中,前两列 'EVI0610' 与 'EVI0626' 为数值型连续变量,而 'SoilType' 为数值型类别变量。我们要做的,也就是将第三列 'SoilType' 进行独热编码.
接下来,进行独热编码的配置.
ohe=OneHotEncoder(handle_unknown='ignore')
ohe.fit(test_data_1)
在这里,第一行是对独热编码的配置,第二行则是对我们刚刚导入的数据进行独热编码处理。得到一个独热编码配置的输出结果.
接下来,看看独热编码处理后,将我们的数据分成了哪些类别.
ohe.categories_
得到结果如下图.
可以发现,一共有三个 array ,为什么呢?仔细看可以发现,独热编码是将我们导入的三列数据全部都当作类别变量来处理了。之所以会这样,是因为我们在一开始没有表明哪一列是类别变量,需要进行独热编码;而哪一列不是类别变量,从而不需要进行独热编码.
那么,我们如何实现上述需求,告诉程序我们要对哪一行进行独热编码呢?在老版本的 sklearn 中,我们可以借助 categorical_features=[x] 参数来实现这一功能,但是新版本 sklearn 取消了这一参数。那么此时,一方面,我们可以借助 ColumnTransformer 来实现这一过程,另一方面,我们可以直接对需要进行转换的列加以处理。后者相对较为容易理解,因此本文对后者进行讲解.
我们将 test_data_1 中的 'SoilType' 列作为索引,从而仅仅对该列数据加以独热编码.
ohe_column=pd.DataFrame(ohe.fit_transform(test_data_1[['SoilType']]).toarray())
ohe_column.head(5)
其中, [['SoilType']] 表示仅仅对这一列进行处理。得到结果如下图.
可以看到,原来的 'SoilType' 列现在成为了 63 列的编码列,那么这样的话,说明我们原先的 'SoilType' 应该一共是有 63 个不同的数值。是不是这个样子呢?我们来检查一下.
count=pd.DataFrame(test_data_1['SoilType'].value_counts())
print(count)
得到结果如下.
好的,没有问题:可以看到此结果共有 63 行,也就是 'SoilType' 列原本是有 63 个不同的值的,证明我们的独热编码没有出错.
此时看一下我们的 test_data_1 数据目前长什么样子.
test_data_1.head(5)
是的,我们仅仅对 'SoilType' 列做了处理,没有影响到整个初始数据。那么先将原本的 'SoilType' 列剔除掉.
test_data_1=test_data_1.drop(['SoilType'],axis=1)
test_data_1.head(5)
再将经过独热编码处理后的 63 列加上.
test_data_1.join(ohe_column)
大功告成! 。
但是这里还有一个问题,我们经过独热编码所得的列名称是以数字来命名的,非常不方便。因此,有没有什么办法可以在独热编码进行的同时,自动对新生成的列加以重命名呢?
pd.get_dummies 是一个最好的办法!其具体用法与上述 OneHotEncoder 类似,因此具体过程就不再赘述啦,大家看代码就可以明白.
首先还是导入与上述内容中一致的初始数据.
test_data_2=pd.read_csv('G:/CropYield/03_DL/00_Data/onehot_test.csv',names=['EVI0610','EVI0626','SoilType'],header=0)
test_data_2.head(5)
进行独热编码并看看结果.
test_data_2_ohe=pd.get_dummies(test_data_2,columns=['SoilType'])
test_data_2_ohe.head(5)
最终结果中,列名称可以说是非常醒目,同时,共有 65 列数据,自动删除了原本的 'SoilType' 列,实现了“ 独热编码 ”“ 新列重命名 ”与“ 原始列删除 ”,可谓一举三得,简直是太方便啦~ 。
最后此篇关于Python实现类别变量的独热编码(One-hotEncoding)的文章就讲到这里了,如果你想了解更多关于Python实现类别变量的独热编码(One-hotEncoding)的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
关闭。这个问题是opinion-based .它目前不接受答案。 想改善这个问题吗?更新问题,以便可以通过 editing this post 用事实和引文回答问题. 9 个月前关闭。 Improve
我使用 partykit打包并遇到以下错误消息: Error in matrix(0, nrow = mi, ncol = nl) : invalid 'nrow' value (too large
我一直在尝试寻找一个量表或分类指标,为 VADER 情绪分析分配一些情感程度,而不仅仅是积极、消极或中性。如果有人可以分享他们的观点或资源来帮助按以下方式对 VADER 复合分数进行分类,我将非常感激
伙计们,我想自动循环..但我不知道是我放错了 while 还是循环错了? 我的数据库 标签:kt_barang kd_kategori | nama_kategori 1
我正在创建一个列出本地企业并按类别、子类别和关键字对它们进行分组的应用程序。以下是企业排序规则: 一个企业可以属于多个类别和子类别 一个企业可以有多个关键字 并非每个类别都有子类别,但有子类别的只有两
我有一系列单词 - 我的刺激 - 它们显示在屏幕上。然而,每个词都有另一个“条件”,即它们是类别 A、类别 B 或类别 C。这可能很简单,但我找不到答案并坚持下去。我的最终目标是在每次运行脚本时将类别
我正在使用 Laravel 5.5 和 MySql。如果不向 Services 表中添加 subCategoryID 列,我无法弄清楚如何将类别和子类别与服务相关联。 目前这是我的表结构 服务类别 i
我有两个部分/类别结构的链接表。 the section table structure id sec_title 1 section 1 2 section 2 the category str
我有一个类层次结构如下 @interface PTLDatasource : NSObject ... @interface PTLFetchedDatasource : PTLDatasource
我有一个 DataFrame df 一列,category 使用以下代码创建: import pandas as pd import random as rand from string import
我经常在多个类中设置获取请求以从核心数据(加上一些其他结果)中检索“allRecipes”或“lastModifiedDate”。 为此使用专门的类别 NSManagedObjectContext+R
可以在 Objective C 中创建类别之间的依赖关系吗?也在类别和它们的基类之间? 我知道在运行时应该没有区别,它们可能只是在编译时合并在一起。例如,假设我将 B 类分解为: B(base cla
这个问题在这里已经有了答案: 关闭 10 年前。
example img of a category selection by user 嘿,我正在尝试设置一个选择,用户必须选择一个类别和第二个类别,但我不知道如何获取他单击的信息。用户单击类别后,它
尝试将投资组合库添加到我正在制作的自定义 wp 主题中。我已经筋疲力尽地试图寻找甚至可以修改一些的解决方案和插件。我认为我在寻找解决方案时遇到的一个问题是我不完全确定哪些搜索词可以帮助我找到与我想要实
当我查看 Cocoa Touch API 时,我可以在同一个头文件中找到一些与类别一起声明的类,例如 @interface NSArray : NSObject @property (readonl
我的 log4j.properties 中有以下内容 log4j.rootLogger = debug, stdout, fileLog log4j.appender.stdout = org.apa
如果我在类中添加类别方法,比如NSXMLNode: @interface NSXMLNode (mycat) - (void)myFunc; @end NSXMLNode 的子类,例如 NSXMLEl
先说场景,wordpress的分类结构是这样的 Level 1: Top Level 2: -Nextme_1 Level 3: --Nextme_2 --Nextme_3 Leve
我有一个解析网络,现在我想浏览标签,或显示图表。我怎样才能得到图表?或者在树中导航。显示第一步然后其他等。并了解这棵树是如何 build 的。 import urllib from lxml impo
我是一名优秀的程序员,十分优秀!