溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶(hù)服務(wù)條款》

PHP7中的Beanstalkd是什么?怎么使用?

發(fā)布時(shí)間:2020-05-19 14:09:48 來(lái)源:億速云 閱讀:242 作者:Leah 欄目:編程語(yǔ)言

今天小編就為大家?guī)?lái)一篇介紹PHP7中的Beanstalkd的文章。小編覺(jué)得挺實(shí)用的,為此分享給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧。

應(yīng)用場(chǎng)景

  隊(duì)列大家都知道是將一些耗時(shí)的操作先不去做,先埋點(diǎn),再異步去處理,這樣對(duì)一些發(fā)郵件發(fā)短信之類(lèi)的耗時(shí)操作,用戶(hù)是感覺(jué)不到的,因?yàn)槁顸c(diǎn)結(jié)束,操作也就結(jié)束了,消費(fèi)隊(duì)列都是在服務(wù)器上做的。主要應(yīng)用在短信或郵件通知,訪問(wèn)第三方接口訂閱消息,商城的一些秒殺活動(dòng),都可以結(jié)合隊(duì)列來(lái)完成。

Beanstalkd 介紹

  Beanstalkd 是一個(gè)高性能,輕量級(jí)的分布式內(nèi)存隊(duì)列,C 代碼,典型的類(lèi) Memcached 設(shè)計(jì),協(xié)議和使用方式都是同樣的風(fēng)格,所以使用過(guò) memcached 的用戶(hù)會(huì)覺(jué)得 Beanstalkd 似曾相識(shí)。

  beanstalkd 的最初設(shè)計(jì)意圖是在高并發(fā)的網(wǎng)絡(luò)請(qǐng)求下,通過(guò)異步執(zhí)行耗時(shí)較多的請(qǐng)求,及時(shí)返回結(jié)果,減少請(qǐng)求的響應(yīng)延遲。

Ubuntu 安裝

sudo apt-get install beanstalkd

配置文件

vim /etc/default/beanstalkd

查看狀態(tài)

service beanstalkd status
# 命令回顯 #
root@:/www/server/php/72/etc# service beanstalkd status
● beanstalkd.service - Simple, fast work queue
   Loaded: loaded (/lib/systemd/system/beanstalkd.service; enabled; vendor preset: enabled)
   Active: active (running) since Tue 2018-10-16 10:42:28 CST; 6 days ago
     Docs: man:beanstalkd(1)
 Main PID: 7033 (beanstalkd)
    Tasks: 1 (limit: 4634)
   CGroup: /system.slice/beanstalkd.service
           └─7033 /usr/bin/beanstalkd -l 0.0.0.0 -p 11300 -b /var/lib/beanstalkd
Oct 16 10:42:28 ip-10-93-2-137 systemd[1]: Started Simple, fast work queue.

配置連通性 + 持久化

ip 用 0.0.0.0 允許所有連接,靠配置安全組或防火墻去約束連接,放開(kāi) -b 參數(shù) (默認(rèn)沒(méi)有持久化),內(nèi)存的隊(duì)列消息可以落地到硬盤(pán) binlog 實(shí)現(xiàn)持久化,斷電可重新讀取隊(duì)列消息。

vim /etc/default/beanstalkd
BEANSTALKD_LISTEN_ADDR=0.0.0.0
BEANSTALKD_LISTEN_PORT=11300
BEANSTALKD_EXTRA="-b /var/lib/beanstalkd"

beanstalkd 任務(wù)狀態(tài)

狀態(tài)注釋
delayed延遲狀態(tài)
ready準(zhǔn)備好狀態(tài)
reserved消費(fèi)者把任務(wù)讀出來(lái),處理時(shí)
buried預(yù)留狀態(tài)
delete刪除狀態(tài)

管理工具

親測(cè)了很多網(wǎng)上能找到的 beanstalkd 工具,這兩款是我最中意的了,一個(gè)命令行,一個(gè) web 的。

命令行:https://github.com/src-d/beanstool

web 界面:https://github.com/ptrofimov/beanstalk_console

編程語(yǔ)言客戶(hù)端

PHP 客戶(hù)端

https://packagist.org/packages/pda/pheanstalk

composer require pda/pheanstalk

寫(xiě)入 job

<?php
//創(chuàng)建隊(duì)列消息
require_once('./vendor/autoload.php');
use Pheanstalk\Pheanstalk;
$pheanstalk = new Pheanstalk('127.0.0.1',11300);
$tubeName = 'email_list';
$jobData = [
    'email' => '123456@163.com',
    'message' => 'Hello World !!',
    'dtime' => date('Y-m-d H:i:s'),
];
$pheanstalk->useTube( $tubeName)->put( json_encode( $jobData ) );

消費(fèi) job

<?php
ini_set('default_socket_timeout', 86400*7);
ini_set( 'memory_limit', '256M' );
// 消費(fèi)隊(duì)列消息
require_once('./vendor/autoload.php');
use Pheanstalk\Pheanstalk;
$pheanstalk = new Pheanstalk('127.0.0.1',11300);
$tubeName = 'email_list';
while ( true )
{
    // 獲取隊(duì)列信息, reserve 阻塞獲取
    $job = $pheanstalk->watch( $tubeName )->ignore( 'default' )->reserve();
    if ( $job !== false )
    {
        $data = $job->getData();
        /* TODO 邏輯操作 */
        /* 處理完成,刪除 job */
        $pheanstalk->delete( $job );
    }
}

default_socket_timeout 這個(gè)參數(shù)是一定要加的,php 默認(rèn)一般是 60s,假如您沒(méi)有在代碼里面設(shè)置,采用默認(rèn)的話(60s),60s 之內(nèi)如果沒(méi)有 job 產(chǎn)生,腳本就會(huì)報(bào) socket 錯(cuò)誤,我寫(xiě)的是 7 天超時(shí),您可以根據(jù)業(yè)務(wù)去調(diào)整,記住一定要配置,網(wǎng)上很多搜的 consumer 腳本都沒(méi)有配置這個(gè),根本不能投入生產(chǎn)環(huán)境使用,這是我親自實(shí)踐的結(jié)果。

  關(guān)于 while true 是否死循環(huán),很明確告訴你是死循環(huán),但是不會(huì)一直耗性能的那樣執(zhí)行下去,它會(huì)在 reserve 這里阻塞不動(dòng),直到有消息產(chǎn)生才會(huì)往下走,所以大可放心使用,我的項(xiàng)目代碼里面是使用了方法調(diào)用方法自身去實(shí)現(xiàn)循環(huán)的。

就是這樣的代碼,供參考:

    public function watchJob()
    {
        $job = $this->pheanstalk->watch( config( 'tube' ) )->ignore( 'default' )->reserve();
        if ( $job !== false )
        {
            $job_data = $job->getData();
            $this->subscribe( $job_data );
            $this->pheanstalk->delete( $job );
            /* 繼續(xù) Watch 下一個(gè) job */
            $this->watchJob();
        }
        else
        {
            $this->log->error( 'reserve false', 'reserve false' );
        }
    }

監(jiān)控 beanstalkd 狀態(tài)

<?php
//監(jiān)控服務(wù)狀態(tài)
require_once('./vendor/autoload.php');
use Pheanstalk\Pheanstalk;
$pheanstalk = new Pheanstalk('127.0.0.1',11300);
$isAlive = $pheanstalk->getConnection()->isServiceListening();
var_dump( $isAlive );

可以配合 email 做一個(gè)報(bào)警郵件,腳本每分鐘去執(zhí)行,判斷狀態(tài)是 false,就給管理員發(fā)送郵件報(bào)警。

一些相關(guān)命令

查看 beanstalkd 服務(wù)內(nèi)存占用

top -u beanstalkd

后臺(tái)運(yùn)行 consumer 腳本

nohup php googlehome_subscribe.php &

查看 consumer 腳本運(yùn)行時(shí)間

ps -A -opid,stime,etime,args | grep consumer.php

手工重啟 consumer 腳本

ps auxf|grep 'googlehome_subscribe.php'|grep -v grep|awk '{print $2}'|xargs kill -9 
nohup php googlehome_subscribe.php &

一些總結(jié)

  php 要把錯(cuò)誤日志打開(kāi),方便收集 consumer 腳本 crash 的 log,腳本跑出一些致命的 error 一定要及時(shí)修復(fù),因?yàn)橐坏┯绣e(cuò)就會(huì)掛掉,這會(huì)影響你腳本的可用性,后期穩(wěn)定之后可以上 supervisor 這種進(jìn)程管理程序來(lái)管控腳本生命周期。

  一些網(wǎng)絡(luò)請(qǐng)求操作,一定要 try catch 到所有錯(cuò)誤,一旦沒(méi)有 catch 到,腳本就崩。我用的是 Guzzle 去做的網(wǎng)絡(luò)請(qǐng)求,下面是我 catch 的一些錯(cuò)誤,代碼片段供參考。

try
{
    /* TODO: 邏輯操作 */
}
catch ( ClientException $e )
{
    $results['mid']    = $this->mid;
    $results['code']   = $e->getResponse()->getStatusCode();
    $results['reason'] = $e->getResponse()->getReasonPhrase();
    $this->log->error( 'properties-changed ClientException', $results );
}
catch ( ServerException $e )
{
    $results['mid']    = $this->mid;
    $results['code']   = $e->getResponse()->getStatusCode();
    $results['reason'] = $e->getResponse()->getReasonPhrase();
    $this->log->error( 'properties-changed ServerException', $results );
}
catch ( ConnectException $e )
{
    $results['mid'] = $this->mid;
    $this->log->error( 'properties-changed ConnectException', $results );
}

  job 消費(fèi)之后一定要?jiǎng)h除掉,如果長(zhǎng)時(shí)間不刪除,php 客戶(hù)端會(huì)有 false 返回,是因?yàn)橛?DEADLINE_SOON 這個(gè)超時(shí)錯(cuò)誤產(chǎn)生,所以處理完任務(wù),一定要記得刪除,這一點(diǎn)跟 kafka 不一樣,beanstalkd 需要開(kāi)發(fā)者自己去刪除 job。

看完上述內(nèi)容,你們對(duì)PHP7中的Beanstalkd大概了解了嗎?如果想了解更多相關(guān)文章內(nèi)容,歡迎關(guān)注億速云行業(yè)資訊頻道,感謝各位的閱讀!

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI