溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

如何使用python計算百分位數(shù)實現(xiàn)數(shù)據分箱

發(fā)布時間:2021-04-25 11:03:47 來源:億速云 閱讀:646 作者:小新 欄目:開發(fā)技術

小編給大家分享一下如何使用python計算百分位數(shù)實現(xiàn)數(shù)據分箱,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

Python的優(yōu)點有哪些

1、簡單易用,與C/C++、Java、C# 等傳統(tǒng)語言相比,Python對代碼格式的要求沒有那么嚴格;2、Python屬于開源的,所有人都可以看到源代碼,并且可以被移植在許多平臺上使用;3、Python面向對象,能夠支持面向過程編程,也支持面向對象編程;4、Python是一種解釋性語言,Python寫的程序不需要編譯成二進制代碼,可以直接從源代碼運行程序;5、Python功能強大,擁有的模塊眾多,基本能夠實現(xiàn)所有的常見功能。

百分位數(shù),如果將一組數(shù)據從小到大排序,并計算相應的累計百分位,則某一百分位所對應數(shù)據的值就稱為這一百分位的百分位數(shù)??杀硎緸椋阂唤Mn個觀測值按數(shù)值大小排列。如,處于p%位置的值稱第p百分位數(shù)。

因為百分位數(shù)是采用等分的方式劃分數(shù)據,因此也可用此方法進行等頻分箱。

import pandas as pd
import numpy as np
import random
t=pd.DataFrame(columns=['l','s'])
#隨機生成1000個0到999整數(shù)
t['l']=[random.randint(0,999) for _range in range(1000)]
#定義s為1,便于統(tǒng)計
t['s']=1
#通過np.percentile找到分位點
l_bin=[]
for i in range(0,101,10):
 l_bin.append(np.percentile(t['l'],i))
#分位點最后一個數(shù)加上一個極小的數(shù),否則切分后數(shù)字999會標記為nan
l_bin[-1]+=1/1e10
print('分位點:',np.array(l_bin).round(2))
#對隨機數(shù)進行切分,right=False時左閉右開
t['box']=pd.cut(t['l'],l_bin,right=False)
tj=t.groupby('box')['s'].agg('sum')
print('分箱統(tǒng)計')
print(tj)
#生成新的標簽
label=[]
for i in range(len(l_bin)-1):
 label.append(str(l_bin[i].round(4))+'+')
#原標簽和自定義的新標簽生成字典 
list_box_td=list(set(t['box']))
list_box_td.sort()
dict_t=dict(zip(list_box_td,label))
#根據字典進行替換
t['new_box']=t['box'].replace(dict_t)
print('新分箱統(tǒng)計')
tj=t.groupby('new_box')['s'].agg('sum')
print(tj)
del t['s']
print(t.head())

輸出結果:

分位點: [ 0. 90.9 194.6 290. 386. 473.5 589. 688. 783.2 884.2
 997. ]
分箱統(tǒng)計
box
[0.0, 90.9)  100
[90.9, 194.6)  100
[194.6, 290.0)  99
[290.0, 386.0)  99
[386.0, 473.5) 102
[473.5, 589.0)  99
[589.0, 688.0) 100
[688.0, 783.2) 101
[783.2, 884.2) 100
[884.2, 997.0) 100
Name: s, dtype: int64
新分箱統(tǒng)計
new_box
0.0+  100
194.6+  99
290.0+  99
386.0+ 102
473.5+  99
589.0+ 100
688.0+ 101
783.2+ 100
884.2+ 100
90.9+  100
Name: s, dtype: int64
  l    box new_box
0 253 [194.6, 290.0) 194.6+
1 468 [386.0, 473.5) 386.0+
2 130 [90.9, 194.6) 90.9+
3 476 [473.5, 589.0) 473.5+
4 656 [589.0, 688.0) 589.0+

可以看出每個分箱內,約有100個數(shù)字。根據這個方法,可以自定義一些標簽。

補充拓展:python 計算動態(tài)時點的百分位數(shù)

【說明】

1、動態(tài)時點:每次計算的數(shù)據框為截止于當前行的數(shù)據,即累計行(多次計算);

2、靜態(tài)時點(當前時間):計算的數(shù)據框為所有行(一次計算);

【代碼】

test = pd.DataFrame(np.random.randint(1, 10, size=10), columns=['value']) # 生成[1,10]的隨機整數(shù)
test['pct_sf'] = test.index.map(lambda x: test.ix[:x].value.rank(pct=True)[x]) # 動態(tài)時點
test['pct'] = test.value.rank(pct=True) # 當前時點
test

如何使用python計算百分位數(shù)實現(xiàn)數(shù)據分箱

以上是“如何使用python計算百分位數(shù)實現(xiàn)數(shù)據分箱”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業(yè)資訊頻道!

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內容(圖片、視頻和文字)以原創(chuàng)、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI