溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶(hù)服務(wù)條款》

Redis存放日志和熱門(mén)文章的方法

發(fā)布時(shí)間:2020-05-13 14:24:56 來(lái)源:億速云 閱讀:318 作者:Leah 欄目:關(guān)系型數(shù)據(jù)庫(kù)

如何在Redis存放日志和熱門(mén)文章?針對(duì)這個(gè)問(wèn)題,今天小編總結(jié)這篇有關(guān)Redis存放日志和熱門(mén)文章的文章,希望幫助更多想學(xué)習(xí)Redis的同學(xué)找到更加簡(jiǎn)單易行的辦法。

使用Redis的列表數(shù)據(jù)類(lèi)型可以實(shí)現(xiàn)多種數(shù)據(jù)結(jié)構(gòu),可以將它看做php中的索引數(shù)組。它可以實(shí)現(xiàn)棧、隊(duì)列、消息隊(duì)列的多種數(shù)據(jù)結(jié)構(gòu)。

存放日志

大家知道,nginx日志默認(rèn)不會(huì)自動(dòng)切割,它會(huì)一直存放一個(gè)文件中,一直追加寫(xiě)入,需要我們自己做切割日志的操作。除了nginx外,很多地方都有用到日志。出了問(wèn)題后,日志是我們是我們查找線(xiàn)索的主要途徑之一。

我們現(xiàn)在打算將系統(tǒng)的日志寫(xiě)入到redis中,每天的日志都記錄到一個(gè)list列表中,可以防止單個(gè)日志文件過(guò)大。

基本思路是,每天的日志信息都寫(xiě)入到單獨(dú)的list列表中,然后做定時(shí)任務(wù),定時(shí)任務(wù)的功能是取出1個(gè)月前的日志列表,將其持久化到文本文件中,然后刪除redis中1個(gè)月前的日志列表,防止redis占用過(guò)多內(nèi)存。

可以使用壓縮函數(shù)將日志信息壓縮,減少內(nèi)存占用。另外,再維護(hù)一個(gè)列表存日志列表的鍵名,方便取出日志列表鍵名。存放日志的偽代碼如下:

$log = ... // 日志信息
// 日志列表鍵名
$key = 'log:'.strtotime(date('Y-m-d'));

// 維護(hù)一個(gè)鍵名列表
if (!$redis->exists($key)) {
 $listlogkey = 'log:key';
 $redis->rpush($listlogkey, $key);
}

// 日志信息存放到redis中
$redis->rpush($key, $log);

定時(shí)任務(wù)代碼如下:

$lastMonth = strtotime("-30 day");

while ($logkey =  $redis->lpop('log:key')) {
    $logTime = explode(':', $logkey)[1];
    
    if ($logTime < $lastMonth) {
        // 從日志列表里去日志信息,一次取50條
        for ($start = 0, $end = 49;true;$start +=50, $end+=50) {
            $logs = $redis->lrange($logkey, $start, $end);
            if (!$logs) break;
            // 將日志信息解壓縮,然后追加寫(xiě)入文本文件中
             ……
             
            // 刪除該日志列表
            $redis->del($logkey);
        }   
    } else {
        // 一個(gè)月之內(nèi)的,重新push到左側(cè)
        $redis->lpush('log:key', $logkey);
        exit;
    }
}

這里有幾點(diǎn)需要注意,如果持久化日志失敗后,或者是近一個(gè)月內(nèi)的日志,需要重新將日志列表鍵名從左側(cè)push。另外,從日志列表里取日志時(shí),不要一次性全部取出,這樣容易導(dǎo)致redis阻塞。每次,取一定數(shù)量(如50條),循環(huán)取出。

存放熱門(mén)新聞ID

這里,就不貼代碼了,主要講講思路。以前我弄個(gè)一個(gè)系統(tǒng),有一個(gè)版單功能,有今日最熱、一周最熱、一月最熱。當(dāng)時(shí),我們的網(wǎng)站流量還挺大的,過(guò)不了幾天,網(wǎng)站就掛了。原因是,mysql的慢查詢(xún)問(wèn)題。因?yàn)?,這塊的sql有分組、COUNT()、條件判斷等。

和大家說(shuō)說(shuō)我們的解決方案:寫(xiě)一個(gè)mysql的存儲(chǔ)過(guò)程,定時(shí)調(diào)用存儲(chǔ)過(guò)程。該存儲(chǔ)過(guò)程的作用是,篩選出今日、一周、一月最熱文章,分別取100條文章id,將其文章id存放到redis的隊(duì)列中。最熱文章,我們只展示前100條。這樣,我們的系統(tǒng)就沒(méi)有了慢查詢(xún)了。

關(guān)于Redis存放日志和熱門(mén)文章的方法就分享到這里了,解決問(wèn)題并不止文章中和大家分析的辦法,不過(guò)本文分析的方法準(zhǔn)確性是不容置疑的。如果喜歡本篇文章,不妨把它分享出去讓更多的人看到。

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀(guān)點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI