溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

hive中任意相鄰時間段數(shù)據(jù)獲取

發(fā)布時間:2020-07-21 05:57:13 來源:網(wǎng)絡(luò) 閱讀:1207 作者:abebill 欄目:大數(shù)據(jù)

通過sql語句獲取相鄰時段數(shù)據(jù)不比通過其它編程語言,因為sql里面沒有for循環(huán),故在實現(xiàn)時需要增加一份副表數(shù)據(jù),這里對該方法做一個記錄。
背景:獲取2017年全年平臺用戶進(jìn)出貴州省的次數(shù)(分為進(jìn)港次數(shù)和出港次數(shù))。
處理方式:
1.根據(jù)定位數(shù)據(jù)獲取當(dāng)年在貴州出現(xiàn)過的用戶
2.獲取這些用戶的全部定位數(shù)據(jù),并根據(jù)定位時間進(jìn)行排序
hive中任意相鄰時間段數(shù)據(jù)獲取
如上,從左到右以此分別為用戶id,定位時間,定位省份id,排序編號,是否定位在貴州
3.這里考慮根據(jù)if_loc這個字段來判斷用戶是入港還是出港,但是僅僅依靠這張a表還無法完全實現(xiàn),因此考慮增加一張b表,b表的數(shù)據(jù)來自于a表,但兩張表對rn值對應(yīng)的數(shù)據(jù)會有一些差別
hive中任意相鄰時間段數(shù)據(jù)獲取
其中 b.rn_b = a.rn - 1
4.兩張表進(jìn)行關(guān)聯(lián),獲取進(jìn)港、出港標(biāo)簽port_flag

select a.bid,a.uploadtime,a.province_id,b.if_loc_b - a.if_loc port_flag
from  a
inner join  b on (a.bid = b.bid and a.rn = b.rn_b)

當(dāng)port_flag = 1 時為入港,port_flag = -1 時為出港,port_flag = 0時為港內(nèi)持續(xù)定位。

入港和出港涉及到兩個時段的定位數(shù)據(jù),通過這種方式,自然也可以獲取到兩個時段內(nèi)的其它數(shù)據(jù)。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI