过采样建模中遇到的问题

落日映苍穹つ 2023-07-21 08:50 2阅读 0赞

### 过采样建模中遇到的问题 ###

### 一、问题概述： ###

由于过采样建模中使用了SMOTE算法，因此需要计算距离，如果说原始数据中存在空值时，此时计算距离将报错，所以需要将原始数据的空值进行处理，这样才能保证SMOTE算法运行成功。

### 二、问题解决： ###

使用sklearn中的

from sklearn.preprocessing import Imputer

模块儿，可以快速对空值数据进行处理，此模块儿使用方式如下：

class sklearn.preprocessing.Imputer(missing_values=’NaN’, strategy=’mean’, axis=0, verbose=0, copy=True)

各个参数含义：

1.missing\_values: integer or “NaN”, optional (default=”NaN”)  
2.strategy : string, optional (default=”mean”)  
     The imputation strategy.  
     If “mean”, then replace missing values using the mean along the axis. 使用平均值代替  
     If “**median**”, then replace missing values using the median along the axis.使用中值代替  
     If “most\_frequent”, then replace missing using the most frequent value along the axis.使用众数代替，也就是出现次数最多的数  
      axis: 默认为 axis=0  
      **axis = 0, 按列处理**  
      aixs =1 , 按行处理

### 三、使用示例 ###

#部分数据可能有空值，因此使用Imputer进行处理
    from sklearn.preprocessing import Imputer
    
    #必须初始化一个Imputer,参数可以修改
    imp =Imputer(missing_values="NaN", strategy="most_frequent",axis=0 )
    #将数据框df按照上述规则进行处理，处理后结果为df_train_tsf
    df_train_tsf = imp.fit_transform(df)

注意点：Imputer只接受一个DF数据结构。

发表评论取消回复

表情：

评论列表（有 0 条评论，2人围观）

还没有评论，来说两句吧...

相关阅读

相关【机器学习】过采样和欠采样问题（二分类数据不均衡）

项目中出现了二分类数据不平衡问题，我过去经常简单的使用过采样的方法，但是存在诸多弊病，研究总结下对于类别不平横问题的处理经验：文章目录一、为什么类别不平衡会影

矫情吗；*/ 2023年09月27日 15:16/ 0 赞/ 115 阅读

相关过采样建模中遇到的问题

过采样建模中遇到的问题一、问题概述：由于过采样建模中使用了SMOTE算法，因此需要计算距离，如果说原始数据中存在空值时，此时计算距离将报错，所以需要将原始数据的

落日映苍穹つ/ 2023年07月21日 08:50/ 0 赞/ 3 阅读

相关软件建模与数据库建模的问题

1.面向领域的软件模型对数据库的影响在软件版本迭代过程中，需求的变化经常会对领域建模及数据建模产生影响，但数据库结构的变化会引发一系列其他系统的变化（如：表同步、数据库同

迈不过友情╰/ 2023年06月10日 04:26/ 0 赞/ 17 阅读

相关数仓建模—建模方法论(范式建模、维度建模、Inmon方法建模)

建模方法论今天我们主要介绍常见的建模方法，这也就是我们今天文章的名称——建模方法论 20年前兴起的数据仓库简单的可分为两大流派，Inmon方法和Kimball方法，分

淩亂°似流年/ 2022年12月27日 07:42/ 0 赞/ 199 阅读

相关 Coding中UML建模问题释疑

0 目录 1 UML 2 类图 2.1 类的UML表示法 2.2 类的关联关系

旧城等待，/ 2022年12月22日 11:23/ 0 赞/ 106 阅读

相关数学建模之运筹学问题

目录 1、引言 2、常见模型与算法 3、问题描述 4、遗传算法 5、仿真结果 -------------------- 1、引言 > 运筹学问题，包括任务规

深藏阁楼爱情的钟/ 2022年11月01日 04:25/ 0 赞/ 171 阅读

相关记录遇到过的问题

IDEA incompatible types. Required: java.lang.String Found: java.lang.String 今天idea

末蓝、/ 2022年06月14日 08:24/ 0 赞/ 283 阅读

相关初学Java编程经常遇到的问题，你们遇到过吗？

随着互联网时代的飞速发展，越来越多的人投身于软件开发行业，大家都称他们为程序员，或者码农。这些程序员的水平也是参差不齐的，有些人从比较好的学校毕业，水平却一般般；也有些人从

比眉伴天荒/ 2022年03月25日 19:14/ 0 赞/ 269 阅读

相关记录遇到过的问题

记录遇到过的问题 1、Connetction refused (Connection refused) 2、Failed to transform file

蔚落/ 2022年03月24日 16:08/ 0 赞/ 491 阅读

相关数学建模的论文写作问题

论文写作是数学建模中关键的一步，本文将提出论文写作过程中应该注意的一些问题。 1.对于数模中的每个问题，在模型建立完成之后都要对其进行分析，挖掘模型中的信息。 2.在使用数

╰+攻爆jí腚メ/ 2021年11月09日 10:32/ 0 赞/ 429 阅读