Python方差特征過濾的實例分析
更新時間：2021年08月15日 11:36:39 作者：小妮淺淺
在本篇文章里小編給大家整理了一篇關(guān)于Python方差特征過濾的實例分析內(nèi)容，有需要的朋友們可以跟著學習下。
說明
1、通過特征本身的方差來篩選特征。特征的方差越小，特征的變化越不明顯。
2、變化越不明顯的特征對我們區(qū)分標簽沒有太大作用，因此應該消除這些特征。
實例
def variance_demo():
"""
過濾低方差特征
:return:
"""
# 1. 獲取數(shù)據(jù)
data = pd.read_csv('factor_returns.csv')
data = data.iloc[:, 1:-2]
print('data:\n', data)
# 2. 實例化一個轉(zhuǎn)換器類
transfer = VarianceThreshold(threshold=10)
# 3. 調(diào)用fit_transform()
data_new = transfer.fit_transform(data)
print('data_new:\n', data_new, data_new.shape)
return None
知識點擴充：
方差過濾法
VarianceThreshold 是特征選擇的一個簡單基本方法,其原理在于–底方差的特征的預測效果往往不好。而VarianceThreshold會移除所有那些方差不滿足一些閾值的特征。默認情況下，它將會移除所有的零方差特征，即那些在所有的樣本上的取值均不變的特征。
sklearn中的VarianceThreshold類中重要參數(shù) threshold（方差的閾值），表示刪除所有方差小于threshold的特征 #不填默認為0——刪除所有記錄相同的特征。
import pandas as pd
import numpy as np
np.random.seed(1) #設置隨機種子，實現(xiàn)每次生成的隨機數(shù)矩陣都一樣
a= np.random.randint(0, 200,10)
b= np.random.randint(0, 200,10)
c= np.random.randint(0, 200,10)
d= [9,9,9,9,9,9,9,9,9,9]
data=pd.DataFrame({"A" : a,"B" : b,"C" : c,"D" : d})
data
from sklearn.feature_selection import VarianceThreshold
sel_model = VarianceThreshold(threshold = 0)
#刪除不合格特征之后的新矩陣
sel_model.fit_transform(data)
到此這篇關(guān)于Python方差特征過濾的實例分析的文章就介紹到這了,更多相關(guān)Python方差特征過濾的實現(xiàn)內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
您可能感興趣的文章:
相關(guān)文章
今天為大家?guī)硪豢钚∮螒?，名叫外星人去哪了，用Python語言實現(xiàn)完成，代碼簡潔易懂，感興趣的小伙伴快來看看吧2022-03-03
這篇文章主要介紹了Python基礎語法之容器的相關(guān)資料，幫助大家更好的理解和學習python，感興趣的朋友可以了解下，希望能夠給你帶來幫助2021-09-09
PyCharm vs VSCode，作為python開發(fā)者，你更傾向哪種IDE呢？
這篇文章主要介紹了PyCharm和vscode作為python ide的優(yōu)劣，幫助你選擇適合自己的ide，感興趣的朋友可以了解下2020-08-08
tf.nn.conv2d與tf.layers.conv2d的區(qū)別及說明
這篇文章主要介紹了tf.nn.conv2d與tf.layers.conv2d的區(qū)別及說明，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2023-02-02
python中json.dumps()和json.loads()的用法
json.dumps()和json.loads()?json.dumps()用于將字典形式轉(zhuǎn)換為字符串,下面這篇文章主要給大家介紹了關(guān)于python中json.dumps()和json.loads()用法的相關(guān)資料,文中通過實例代碼介紹的非常詳細,需要的朋友可以參考下2022-09-09
通過Python實現(xiàn)Payload分離免殺過程詳解
這篇文章主要介紹了通過Python實現(xiàn)Payload分離免殺過程詳解,文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-07-07
朋友圈許多小伙伴都在發(fā)：請給我一面五星紅旗的動態(tài)，這篇文章就主要教大家如何使用python畫中國國旗，具有一定的參考價值，感興趣的小伙伴們可以參考一下2019-09-09
我們可以使用python來操作文件，比如讀取文件內(nèi)容、寫入新的內(nèi)容等，本文主要介紹了Python IO文件管理的具體使用，文中通過示例代碼介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們可以參考一下2022-09-09
Python開發(fā)虛擬環(huán)境使用virtualenvwrapper的搭建步驟教程圖解
virtualenvwrapper是用來管理virtualenv的擴展包，用著很方便。這篇文章主要介紹了Python開發(fā)虛擬環(huán)境使用virtualenvwrapper的搭建步驟 ,需要的朋友可以參考下2018-09-09
python爬取拉勾網(wǎng)職位數(shù)據(jù)的方法
這篇文章主要介紹了python爬取拉勾網(wǎng)職位數(shù)據(jù)的實現(xiàn)方法，非常不錯，具有參考借鑒價值,需要的朋友可以參考下2018-01-01