摘要：場景說明用于處理比較耗時的請求，例如批量發(fā)送郵件，如果直接在網(wǎng)頁觸發(fā)執(zhí)行發(fā)送，程序會出現(xiàn)超時高并發(fā)場景，當(dāng)某個時刻請求瞬間增加時，可以把請求寫入到隊列，后臺在去處理這些請求搶購場景，先入先出的模式命令或往列表右側(cè)推入數(shù)據(jù)客戶端阻塞直到隊列有

用于處理比較耗時的請求，例如批量發(fā)送郵件，如果直接在網(wǎng)頁觸發(fā)執(zhí)行發(fā)送，程序會出現(xiàn)超時

高并發(fā)場景，當(dāng)某個時刻請求瞬間增加時，可以把請求寫入到隊列，后臺在去處理這些請求

搶購場景，先入先出的模式

rpush + blpop 或 lpush + brpop

rpush : 往列表右側(cè)推入數(shù)據(jù)  
blpop : 客戶端阻塞直到隊列有值輸出

$stmt = $pdo->prepare("select id, cid, name from zc_goods limit 200000");
$stmt->execute();
while ($row = $stmt->fetch(PDO::FETCH_ASSOC)) {
    $redis->rPush("goods:task", json_encode($row));
}

$redis->close();

獲取20000萬個商品，并把json化后的數(shù)據(jù)推入goods:task隊列

// 出隊
while (true) {
    // 阻塞設(shè)置超時時間為3秒
    $task = $redis->blPop(array("goods:task"), 3);
    if ($task) {
        $redis->rPush("goods:success:task", $task[1]);
        $task = json_decode($task[1], true);
        echo $task["id"] . ":" . $task["cid"] . ":" . "handle success";
        echo PHP_EOL;
    } else {
        echo "nothing" . PHP_EOL;
        sleep(5);
    }
}

設(shè)置blpop阻塞時間為3秒，當(dāng)有數(shù)據(jù)出隊時保存到goods:success:task表示執(zhí)行成功，當(dāng)隊列沒有數(shù)據(jù)時，程序睡眠10秒重新檢查goods:task是否有數(shù)據(jù)出隊

cli 模式執(zhí)行命令：

php simple.php
php queueBlpop.php

思路：

blpop 有多個鍵時，blpop會從左至右遍歷鍵，一旦一個鍵能彈出元素，客戶端立即返回。例如：

blpop key1 key2 key3 key4

從key1到key4遍歷，如果哪個key有值，則彈出這個值，若多個key同時有值時，優(yōu)先彈出排在左邊的key。

// 設(shè)置優(yōu)先級隊列
$high = "goods:high:task";
$mid = "goods:mid:task";
$low = "goods:low:task";

$stmt = $pdo->prepare("select id, cid, name from zc_goods limit 200000");
$stmt->execute();
while ($row = $stmt->fetch(PDO::FETCH_ASSOC)) {
    // cid 小于100放在低級隊列
    if ($row["cid"] < 100) {
        $redis->rPush($low, json_encode($row));
    }
    // cid 100到600之間放在中級隊列
    elseif ($row["cid"] > 100 && $row["cid"] < 600) {
        $redis->rPush($mid, json_encode($row));
    }
    // cid 大于600放在高級隊列 
    else {
        $redis->rPush($high, json_encode($row));
    }
}
$redis->close();

// 優(yōu)先級隊列
$high = "goods:high:task";
$mid = "goods:mid:task";
$low = "goods:low:task";

// 出隊
while(true){
    // 優(yōu)先級高的隊列放在左側(cè)
    $task = $redis->blPop(array($high, $mid, $low), 3);
    if ($task) {
        $task = json_decode($task[1], true);
        echo $task["id"] . ":" . $task["cid"] . ":" . "handle success";
        echo PHP_EOL;
    } else {
        echo "nothing" . PHP_EOL;
        sleep(5);
    }
}

優(yōu)先級高的隊列放在blpop命令左側(cè)，依次排序，blpop命令會依次彈出high, mid, low隊列的值

cli 模式執(zhí)行命令：

php priority.php
php priorityBlpop.php

思路：

可以用一個有序集合來保存延遲任務(wù)，member保存任務(wù)內(nèi)容，score保存（當(dāng)前時間 + 延時時間）。用時間作為score。程序只要用有序集合的第一條任務(wù)的score和當(dāng)前時間做比較，如果當(dāng)前時間比score小，說明有序集合的所有任務(wù)還沒到執(zhí)行時間。

$stmt = $pdo->prepare("select id, cid, name from zc_goods limit 200000");
$stmt->execute();
while ($row = $stmt->fetch(PDO::FETCH_ASSOC)) {
    $redis->zAdd("goods:delay:task", time() + rand(1, 300), json_encode($row));
}

將20萬條任務(wù)導(dǎo)入有序集合goods:delay:task，所有任務(wù)延遲到之后的1秒到300秒內(nèi)執(zhí)行

while (true) {
    // 因為是有序集合，只要判斷第一條記錄的延時時間，例如第一條未到執(zhí)行時間
    // 相對說明集合的其他任務(wù)未到執(zhí)行時間
    $rs = $redis->zRange("goods:delay:task", 0, 0, true);
    // 集合沒有任務(wù)，睡眠時間設(shè)置為5秒
    if (empty($rs)) {
        echo "no tasks , sleep 5 seconds" . PHP_EOL;
        sleep(5);
        continue;
    }

    $taskJson = key($rs);
    $delay = $rs[$taskJson];
    $task = json_decode($taskJson, true);
    $now = time();

    // 到時間執(zhí)行延時任務(wù)
    if ($delay <= $now) {
        // 對當(dāng)前任務(wù)加鎖，避免移動移動延時任務(wù)到任務(wù)隊列時被其他客戶端修改
        if (!($identifier = acquireLock($task["id"]))) {
            continue;
        }

        // 移動延時任務(wù)到任務(wù)隊列
        $redis->zRem("goods:delay:task", $taskJson);
        $redis->rPush("goods:task", $taskJson);
        echo $task["id"] . " run " . PHP_EOL;

        // 釋放鎖
        releaseLock($task["id"], $identifier);
    } else {
        // 延時任務(wù)未到執(zhí)行時間
        $sleep = $delay - $now;
        // 最大值設(shè)置為2秒，保證如果有新的任務(wù)（延時時間1秒）進入集合時能夠及時的被處理
//        $sleep = $sleep > 2 ? 2 :$sleep;
        echo "wait " . $sleep . " seconds " . PHP_EOL;
        sleep($sleep);
    }
}

這個文件對有序集合內(nèi)的延遲任務(wù)做處理，如果延遲任務(wù)到了執(zhí)行時間，則把延遲任務(wù)移動到任務(wù)隊列中

// 出隊
while (true) {
    // 阻塞設(shè)置超時時間為3秒
    $task = $redis->blPop(array("goods:task"), 3);
    if ($task) {
        $redis->rPush("goods:success:task", $task[1]);
        $task = json_decode($task[1], true);
        echo $task["id"] . ":" . $task["cid"] . ":" . "handle success";
        echo PHP_EOL;
    } else {
        echo "nothing" . PHP_EOL;
        sleep(5);
    }
}

處理任務(wù)隊列中的任務(wù)

cli模式下執(zhí)行命令：

php delay.php
php delayHanlde.php
php queueBlpop.php

完整代碼：https://github.com/wuzhc/demo...
相關(guān)項目: https://github.com/wuzhc/gmq