處理MySQL大量數(shù)據(jù)去重的簡單方法

發(fā)布時(shí)間：2020-05-12 15:26:21 來源：億速云閱讀：299 作者：三月欄目：MySQL數(shù)據(jù)庫

下面講講關(guān)于處理MySQL大量數(shù)據(jù)去重的簡單方法，文字的奧妙在于貼近主題相關(guān)。所以，閑話就不談了，我們直接看下文吧，相信看完處理MySQL大量數(shù)據(jù)去重的簡單方法這篇文章你一定會(huì)有所受益。

因?yàn)橛写罅康闹貜?fù)數(shù)據(jù)，所以選擇的去重方法是通過聚合函數(shù)建立一個(gè)新的表，然后重命名。sql代碼如下：

create table tmp select * from table_name group by column1,column2;

然后呢，因?yàn)閯h除過大量數(shù)據(jù)，所以id都快到600000了。。?？粗K眼了，所以把id變成從1 開始了。方法是先把id字段刪除了，然后再增加id字段并設(shè)為自增長，好了，終于看著舒心了。。。三十多萬的數(shù)據(jù)去重后大概十八條數(shù)據(jù)，用時(shí)70s，估計(jì)幾千萬數(shù)據(jù)的時(shí)候我就該哭了，anyway，到時(shí)再說，繼續(xù)想想有什么好辦法。

注意：如果之前是按id排序的，改為從1開始后，不會(huì)和之前的順序一樣。會(huì)按照第二個(gè)字段重新排序的。

對(duì)于以上處理MySQL大量數(shù)據(jù)去重的簡單方法相關(guān)內(nèi)容，大家還有什么不明白的地方嗎？或者想要了解更多相關(guān)，可以繼續(xù)關(guān)注我們的行業(yè)資訊板塊。

向AI問一下細(xì)節(jié)

處理MySQL大量數(shù)據(jù)去重的簡單方法

猜你喜歡

最新資訊

相關(guān)推薦

相關(guān)標(biāo)簽