濮阳杆衣贸易有限公司

主頁 > 知識庫 > Pandas groupby apply agg 的區(qū)別 運行自定義函數(shù)說明

Pandas groupby apply agg 的區(qū)別 運行自定義函數(shù)說明

熱門標簽:在哪里辦理400電話號碼 江蘇客服外呼系統(tǒng)廠家 西藏智能外呼系統(tǒng)五星服務(wù) 原裝電話機器人 工廠智能電話機器人 平頂山外呼系統(tǒng)免費 千陽自動外呼系統(tǒng) 清遠360地圖標注方法 400電話申請服務(wù)商選什么

agg 方法將一個函數(shù)使用在一個數(shù)列上,然后返回一個標量的值。也就是說agg每次傳入的是一列數(shù)據(jù),對其聚合后返回標量。

對一列使用三個函數(shù):

對不同列使用不同函數(shù)

apply 是一個更一般化的方法:將一個數(shù)據(jù)分拆-應(yīng)用-匯總。而apply會將當前分組后的數(shù)據(jù)一起傳入,可以返回多維數(shù)據(jù)。

實例:

1、數(shù)據(jù)如下:

lawsuit2[['EID','LAWAMOUNT','LAWDATE']]

2、groupby后應(yīng)用apply傳入函數(shù)數(shù)據(jù)如下:

lawsuit2[['EID','LAWAMOUNT','LAWDATE']].groupby(['EID']).apply(lambda df:print(df))

3、如果使用agg,對于兩列可以處理,但對于上面的三列,打印數(shù)據(jù)如下:

lawsuit2[['EID','LAWAMOUNT','LAWDATE']].groupby(['EID']).agg(lambda df:print(df))

可以看到agg傳入的只有一列數(shù)據(jù),如果我們使用df加列下表強行取值也能取到,但是有時會出現(xiàn)各種keyError問題。

4、完整代碼:

判斷最近一次日期的花費是否是所有的花費中最大花費。

def handle(df):
#   print(df)
# 找最大日期
  maxdate = df['LAWDATE'].max()
# 找最大費用
  left = df[ df['LAWDATE']==maxdate ]['LAWAMOUNT'].max()
# 取ID
  EID = df['EID'].values[0]
#   print(EID)
# 從已存在的表中根據(jù)EID找到最大費用
  right = LAW_AMOUNT_MAX.loc[EID,'LAW_AMOUNT_MAX']
# 判斷費用是否相等
  if left==right:
    return 1
  else:
    return 0
    
LAW_AMOUNT_MAX_IS_LAST = lawsuit2[['EID','LAWAMOUNT','LAWDATE']].groupby(['EID']).apply(handle)

其他注意點:

在groupby后使用apply,如果直接返回,會出現(xiàn)有多余的groupby索引問題,可以使用group_keys解決:

orgin = reviews_df.sort_values(["reviewerID","unixReviewTime"]).groupby("reviewerID",group_keys=False)
train = orgin.apply(lambda df: df[:-2])
train.head()

補充:pandas分組聚合運算groupby之a(chǎn)gg,apply,transform

groupby函數(shù)是pandas中用以分組的函數(shù),可以通過指定列來進行分組,并返回一個GroupBy對象。對于GroupBy對象的聚合運算,其有經(jīng)過優(yōu)化的較為常用的sum,mean等函數(shù),但是如果我們需要用自定義的函數(shù)進行聚合運算,那么就需要通過agg,apply,transform來實現(xiàn)。

agg,apply和transform三者之間的區(qū)別在于:1、agg和transform之間的區(qū)別為:前者經(jīng)過聚合后,只會在該組單列中返回一個標量值,而transform則會將該標量值在該組單列內(nèi)進行廣播,保持原DataFrame的索引不變;2、agg和transform中的函數(shù)參數(shù)是以分組后的單列(Series)為操作對象的,即傳入agg和transform的函數(shù)的參數(shù)是列,而apply中的函數(shù)參數(shù)是分組后整個的DataFrame。下面分別對這兩點進行說明。

一、agg和transform

如下代碼所示,構(gòu)造一個df,agg和transform中l(wèi)ambda函數(shù)的input都為單列,但是agg返回的索引是分組的key的唯一值,而transform返回的索引和原df一樣,但是相比于agg返回的結(jié)果,發(fā)現(xiàn)transform只是在d行處的值進行了重復(fù)的廣播,這個目的就是維持原df的索引不變,且被拿來分組的列會被剔除。

df
Out[1]:
 index a b c
0   d 0 1 2
1   d 3 4 5
2   e 6 7 8
 
df.groupby(by='index').agg(lambda x:x.shape)
Out[2]: 
     a   b   c
index         
d   (2,) (2,) (2,)
e   (1,) (1,) (1,)
 
df.groupby(by='index').transform(lambda x:x.shape)
Out[3]: 
   a   b   c
0 (2,) (2,) (2,)
1 (2,) (2,) (2,)
2 (1,) (1,) (1,) 

二、agg和apply

下面的是apply的結(jié)果,相比于上面agg的結(jié)果,可以發(fā)現(xiàn),實際上lambda函數(shù)的input不再是一個Series,而是分組后的整個DataFrame。

dd.groupby(by='index').apply(lambda x:x.shape)
Out[4]: 
index
d  (2, 4)
e  (1, 4)

三、其他注意點

對于agg函數(shù),其不僅可以傳入一個函數(shù)對每列執(zhí)行相同的操作,還可以傳入一個字典{'col_name':func},來對不同的列做不同的操作,也可以將func替換為由多個不同的函數(shù)組成的list,實現(xiàn)對同一列做多個不同的操作,這是agg函數(shù)最為靈活的地方。

這三個函數(shù),參數(shù)形式都為(func, *args,**kwargs),所以可以通過位置參數(shù)和關(guān)鍵字參數(shù)給func傳遞額外的參數(shù)。

以上為個人經(jīng)驗,希望能給大家一個參考,也希望大家多多支持腳本之家。如有錯誤或未考慮完全的地方,望不吝賜教。

您可能感興趣的文章:
  • pandas DataFrame實現(xiàn)幾列數(shù)據(jù)合并成為新的一列方法
  • pandas分組排序 如何獲取第二大的數(shù)據(jù)
  • 使用pandas忽略行列索引,縱向拼接多個dataframe
  • pandas group分組與agg聚合的實例
  • pandas groupby分組對象的組內(nèi)排序解決方案
  • pandas組內(nèi)排序,并在每個分組內(nèi)按序打上序號的操作
  • pandas 實現(xiàn)將兩列中的較大值組成新的一列

標簽:白城 西安 股票 日照 錦州 安慶 天水 隨州

巨人網(wǎng)絡(luò)通訊聲明:本文標題《Pandas groupby apply agg 的區(qū)別 運行自定義函數(shù)說明》,本文關(guān)鍵詞  Pandas,groupby,apply,agg,的,區(qū)別,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《Pandas groupby apply agg 的區(qū)別 運行自定義函數(shù)說明》相關(guān)的同類信息!
  • 本頁收集關(guān)于Pandas groupby apply agg 的區(qū)別 運行自定義函數(shù)說明的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章
    托里县| 柞水县| 甘孜县| 土默特右旗| 大埔县| 原平市| 山阴县| 彰化市| 桂阳县| 临安市| 拉萨市| 武定县| 乌兰浩特市| 栾城县| 海安县| 富宁县| 龙游县| 炎陵县| 千阳县| 天长市| 罗山县| 南安市| 利川市| 灵山县| 韶关市| 都匀市| 红安县| 中牟县| 晋中市| 且末县| 花垣县| 凤城市| 昌都县| 庄浪县| 金华市| 含山县| 肃南| 浦江县| 漳平市| 清涧县| 清徐县|