溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

如何使用Kaggle順利進(jìn)行上傳和下載數(shù)據(jù)

發(fā)布時(shí)間:2021-11-10 09:23:29 來(lái)源:億速云 閱讀:564 作者:柒染 欄目:大數(shù)據(jù)

如何使用Kaggle順利進(jìn)行上傳和下載數(shù)據(jù),很多新手對(duì)此不是很清楚,為了幫助大家解決這個(gè)難題,下面小編將為大家詳細(xì)講解,有這方面需求的人可以來(lái)學(xué)習(xí)下,希望你能有所收獲。

自從Kaggle被谷歌收購(gòu)后,Kaggle上的數(shù)據(jù)下載和kernel使用到了很多的谷歌應(yīng)用。與參賽選手強(qiáng)相關(guān)的是比賽數(shù)據(jù)集下載和文件的上傳。

如何順利的上傳和下載數(shù)據(jù)呢,本文將給出三種解決方案。

修改DNS


     

由于國(guó)內(nèi)運(yùn)營(yíng)商網(wǎng)絡(luò)管控的原因,導(dǎo)致國(guó)內(nèi)訪問(wèn)國(guó)外的速度都非常慢,所以在下載Kaggle數(shù)據(jù)集時(shí)可以嘗試修改系統(tǒng)DNS。

這里比較推薦以下幾個(gè)DNS:
 
  • 谷歌:8.8.8.8,8.8.4.4

  • 韓國(guó):168.126.63.1,168.126.63.2

修改了DNS有可能可以順利下載數(shù)據(jù)集了,同時(shí)也會(huì)加速對(duì)Github的訪問(wèn),但是對(duì)國(guó)內(nèi)網(wǎng)頁(yè)速度會(huì)有所下降。


kaggleapi


     
https://github.com/Kaggle/kaggle-api
KaggleAPI是Kaggle官方提供的API工具,可以用來(lái)下載數(shù)據(jù)、上傳數(shù)據(jù)、提交文件和查看榜單等眾多功能,基本上可以代替所有的操作。  
KaggleAPI使用非常方便,只需要在本地配置好賬戶信息:  
# 配置文件目錄chmod 600 ~/.kaggle/kaggle.json
# 賬號(hào)配置信息,可以在Kaggle個(gè)人界面下載export KAGGLE_USERNAME=datadinosaurexport KAGGLE_KEY=xxxxxxxxxxxxxx
 
  然后就直接可以在命令行界面進(jìn)行操作了,比如下載一個(gè)比賽的數(shù)據(jù)集:  
# 下載比賽數(shù)據(jù)集kaggle competitions download favorita-grocery-sales-forecasting
# 提交結(jié)果文件kaggle competitions submit favorita-grocery-sales-forecasting -f sample_submission_favorita.csv.7z -m "My submission message"
所以KaggleAPI非常適合在服務(wù)器下載數(shù)據(jù),速度一般比直接瀏覽器下載快。但是KaggleAPI還是會(huì)收到網(wǎng)絡(luò)限制,如何使用Kaggle順利進(jìn)行上傳和下載數(shù)據(jù)  


看完上述內(nèi)容是否對(duì)您有幫助呢?如果還想對(duì)相關(guān)知識(shí)有進(jìn)一步的了解或閱讀更多相關(guān)文章,請(qǐng)關(guān)注億速云行業(yè)資訊頻道,感謝您對(duì)億速云的支持。

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI