摘要:消費(fèi)者開發(fā)使用本例時,請確保你使用的編譯時開啟了本例我們采用的守護(hù)程序協(xié)程池來完成一個超高性能的郵件發(fā)送程序。
去年 Mix PHP V1 發(fā)布時,我寫了一個多進(jìn)程的郵件發(fā)送實例: 使用 mixphp 打造多進(jìn)程異步郵件發(fā)送,今年 Mix PHP V2 發(fā)布,全面的協(xié)程支持讓我們可以使用一個進(jìn)程就可達(dá)到之前多個進(jìn)程都無法達(dá)到的更高 IO 性能,所以今天重寫一個協(xié)程池版本的郵件發(fā)送實例。
郵件發(fā)送是很常見的需求,由于發(fā)送郵件的操作一般是比較耗時的,所以我們一般采用異步處理來提升用戶體驗,而異步通常我們使用消息隊列來實現(xiàn)。
下面演示一個異步郵件發(fā)送系統(tǒng)的開發(fā)過程,涉及知識點(diǎn):
異步
消息隊列
守護(hù)進(jìn)程
協(xié)程池
如何使用消息隊列實現(xiàn)異步PHP 使用消息隊列通常是使用中間件來實現(xiàn),常用的消息中間件有:
redis
rabbitmq
kafka
本次我們選用 Redis 來實現(xiàn)異步郵件發(fā)送,Redis 的數(shù)據(jù)類型中有一個 list 類型,可實現(xiàn)消息隊列,使用以下命令:
// 入列 $redis->lpush($key, $data); // 出列 $data = $redis->rpop($key); // 阻塞出列 $data = $redis->brpop($key, 10);架構(gòu)設(shè)計
本實例由傳統(tǒng) MVC 框架投遞郵件發(fā)送需求(生產(chǎn)者),Mix PHP 編寫的守護(hù)程序執(zhí)行發(fā)送任務(wù)(消費(fèi)者)。
郵件發(fā)送庫選型以往我們通常使用框架提供的郵件發(fā)送庫,或者網(wǎng)上下載別的用戶分享的庫,composer 出現(xiàn)后,https://packagist.org/ 上有大量優(yōu)質(zhì)的庫,我們只需選擇一個最好的即可,本例選擇 swiftmailer。
由于發(fā)送任務(wù)是由 Mix PHP 執(zhí)行,所以 swiftmailer 是安裝在 Mix PHP 項目中,在項目根目錄中執(zhí)行以下命令安裝:
composer require swiftmailer/swiftmailer生產(chǎn)者開發(fā)
在郵件發(fā)送這個需求中生產(chǎn)者是指投遞發(fā)送任務(wù)的一方,這一方通常是一個接口或網(wǎng)頁,這個部分并不一定需 Mix PHP 開發(fā),TP、CI、YII 這些都可以,只需在接口或網(wǎng)頁中把任務(wù)信息投遞到消息隊列中即可。
在傳統(tǒng) MVC 框架的控制器中增加如下代碼:
通??蚣苤惺褂?Redis 會安裝一個類庫來使用,本例使用原生代碼,便于理解。
// 連接 $redis = new Redis(); if (!$redis->connect("127.0.0.1", 6379)) { throw new Exception("Redis connect failed."); } $redis->auth(""); $redis->select(0); // 投遞任務(wù) $data = [ "to" => "***@qq.com", "body" => "The message content", "subject" => "The title content", ]; $redis->lpush("queue:email", serialize($data));
通常異步開發(fā)中,投遞完成后就會立即響應(yīng)一個消息給用戶,當(dāng)然此時該任務(wù)并沒有在生產(chǎn)者中執(zhí)行,而是待消息被消費(fèi)者獲取后才執(zhí)行。
消費(fèi)者開發(fā)使用本例時,請確保你使用的 Swoole 編譯時開啟了 openssl
本例我們采用 Mix PHP V2 的守護(hù)程序、協(xié)程池來完成一個超高性能的郵件發(fā)送程序。
因為我們是開發(fā)一個守護(hù)程序,所以我們在 applications/daemon 模塊中開發(fā),首先我們在配置 applications/daemon/config/main.php 中注冊一個命令:
// 命令 "commands" => [ "mailer" => ["Mailer", "description" => "Mailer daemon."], ],
注冊的命令中指定的 Mailer 命令類,接下來我們編寫一個 MailerCommand 類:
applications/daemon/src/Commands/MailerCommand.php
*/ class MailerCommand { /** * 退出 * @var bool */ public $quit = false; /** * 主函數(shù) */ public function main() { // 捕獲信號 ProcessHelper::signal([SIGHUP, SIGINT, SIGTERM, SIGQUIT], function ($signal) { $this->quit = true; ProcessHelper::signal([SIGHUP, SIGINT, SIGTERM, SIGQUIT], null); }); // 協(xié)程池執(zhí)行任務(wù) xgo(function () { $maxWorkers = 20; $maxQueue = 20; $jobQueue = new Channel($maxQueue); $dispatch = new Dispatcher([ "jobQueue" => $jobQueue, "maxWorkers" => $maxWorkers, ]); $dispatch->start(MailerWorker::class); // 投放任務(wù) $redis = app()->redisPool->getConnection(); while (true) { if ($this->quit) { $dispatch->stop(); return; } try { $data = $redis->brPop(["queue:email"], 3); } catch (Throwable $e) { $dispatch->stop(); return; } if (!$data) { continue; } $data = array_pop($data); // brPop命令最后一個鍵才是值 $jobQueue->push($data); } }); } }
從 $data = $redis->brPop(["queue:email"], 3); 外部的異常捕獲可得知,當(dāng) Redis 連接出錯時,比如 Redis 重啟、連接異常時協(xié)程池會安全退出,也就是說當(dāng)進(jìn)程異常退出后用戶需使用 supervisor、pm2 等工具重啟守護(hù)進(jìn)程。
上面是一個 Mix PHP 協(xié)程池的使用代碼,基本可以直接復(fù)制使用,框架默認(rèn)包含了協(xié)程池的 Demo,本次實例只是修改了協(xié)程池的 Worker,本命令主要是完成從 Redis 隊列中獲取消息然后 push 到 jobQueue 中,jobQueue 中的數(shù)據(jù)會被 20 個 Worker 實例中某一個搶占后并行執(zhí)行,本例的郵件發(fā)送代碼邏輯就在 MailerWorker 類中:
applications/daemon/src/Libraries/MailerWorker.php
*/ class MailerWorker extends AbstractWorker implements WorkerInterface { /** * 郵件發(fā)送器 * @var Mailer */ public $mailer; /** * 初始化事件 */ public function onInitialize() { parent::onInitialize(); // TODO: Change the autogenerated stub // 實例化一些需重用的對象 $this->mailer = new Mailer(); } /** * 處理 * @param $data */ public function handle($data) { // TODO: Implement handle() method. $data = unserialize($data); if (empty($data)) { return; } try { $this->mailer->send($data["to"], $data["subject"], $data["body"]); app()->log->info("Mail sent successfully:to {to} subject {subject}", $data); } catch (Throwable $e) { app()->log->error("Mail failed to send:to {to} subject {subject} error {error}", array_merge($data, ["error" => $e->getMessage()])); } } }
由以上代碼可見,Worker 在初始化時,新增了一個 Mailer 類的屬性,當(dāng) jobQueue 消息投遞過來時消息會傳遞到 handle 方法,在該方法中使用 Mailer 類的實例完成郵件發(fā)送任務(wù),所以我們要編寫了一個 Mailer 發(fā)送程序:
applications/daemon/src/Libraries/Mailer.php
*/ class Mailer { /** * 配置信息 */ const HOST = "smtpdm.aliyun.com"; const PORT = 465; const SECURITY = "ssl"; const USERNAME = "***"; const PASSWORD = "***"; /** * Mailer constructor. */ public function __construct() { // 開啟協(xié)程鉤子 Coroutine::enableHook(); } /** * 發(fā)送 * @param $to * @param $subject * @param $body * @return int */ public function send($to, $subject, $body) { // Create the Transport $transport = (new Swift_SmtpTransport(self::HOST, self::PORT, self::SECURITY)) ->setUsername(self::USERNAME) ->setPassword(self::PASSWORD); // Create the Mailer using your created Transport $mailer = new Swift_Mailer($transport); // Create a message $message = (new Swift_Message($subject)) ->setFrom([self::USERNAME => "**網(wǎng)"]) ->setTo($to) ->setBody($body); // Send the message return $mailer->send($message); } }
在 Mailer 發(fā)送程序中我們使用了前面 composer 安裝的 swiftmailer 庫來發(fā)送郵件,以上就完成了全部的代碼邏輯,現(xiàn)在我們開始測試。
先啟動消費(fèi)者守護(hù)程序:
[root@localhost bin]# ./mix-daemon mailer
將上文的生產(chǎn)者腳本命名為 push.php 然后在 CLI 中執(zhí)行 (開一個新終端):
[root@localhost bin]# php /tmp/push.php
消費(fèi)者守護(hù)程序結(jié)果:
[root@localhost bin]# ./mix-daemon mailer [info] 2019-04-15 11:48:36 [message] Mail sent successfully:to ***@qq.com subject The title content
命令行終端打印了發(fā)送成功的日志,發(fā)送完成。
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://www.ezyhdfw.cn/yun/31259.html
摘要:前些時間我們發(fā)布了實例協(xié)程池異步郵件發(fā)送守護(hù)程序范例,這一次我們提供一個使用大廠通過協(xié)程化來并行執(zhí)行短信發(fā)送任務(wù),本文是一個代碼簡單性能極強(qiáng)的范例。 前些時間我們發(fā)布了 Mix PHP V2 實例:協(xié)程池異步郵件發(fā)送守護(hù)程序 范例,這一次我們提供一個使用大廠 SDK 通過 Swoole Hook 協(xié)程化來并行執(zhí)行短信發(fā)送任務(wù),本文是一個代碼簡單、IO 性能極強(qiáng)的范例。 請先升級到 m...
摘要:主函數(shù)查詢數(shù)據(jù)不手動釋放的連接不會歸還連接池,會在析構(gòu)時丟棄執(zhí)行結(jié)果為,說明是并行執(zhí)行的。主函數(shù)查詢數(shù)據(jù)即便拋出了異常,仍然能執(zhí)行到,沒有導(dǎo)致內(nèi)的一直處于阻塞狀態(tài)。主函數(shù)一次性定時持續(xù)定時停止定時 協(xié)程 Mix PHP V2 基于 Swoole 4 的 PHP Stream Hook 協(xié)程技術(shù)開發(fā),協(xié)程使用方式與 Golang 幾乎一致,包括框架封裝的協(xié)程池、連接池、命令行處理都大量參...
摘要:是一個非常流行的的客戶端,現(xiàn)在各大廠的也都開始基于開發(fā),因為只支持的協(xié)程,而默認(rèn)是使用擴(kuò)展的,所以開發(fā)了,能在不修改源碼的情況下讓協(xié)程化。 Guzzle 是一個非常流行的 PHP 的 HTTP 客戶端,現(xiàn)在各大廠的 SDK 也都開始基于 Guzzle 開發(fā),因為 Swoole 只支持 PHP Stream 的協(xié)程 Hook ,而 Guzzle 默認(rèn)是使用 cURL 擴(kuò)展的,所以 Mix...
摘要:之前過行代碼實現(xiàn)通用協(xié)程池今天看了下相關(guān)文檔,用也實現(xiàn)了一個,由于沒有的,所以實現(xiàn)的有點(diǎn)簡單,但是實用性還可以,通過工廠函數(shù)實現(xiàn)了通用性。官方的協(xié)程池是用只能用在。因為協(xié)程池代碼層耦合了實例化邏輯。 之前過golang40行代碼實現(xiàn)通用協(xié)程池 今天看了下swoole相關(guān)文檔,用PHP也實現(xiàn)了一個,由于swoole沒有g(shù)olang的select,所以實現(xiàn)的有點(diǎn)簡單,但是實用性還可以,通過...
摘要:本文先回顧生成器,然后過渡到協(xié)程編程。其作用主要體現(xiàn)在三個方面數(shù)據(jù)生成生產(chǎn)者,通過返回數(shù)據(jù)數(shù)據(jù)消費(fèi)消費(fèi)者,消費(fèi)傳來的數(shù)據(jù)實現(xiàn)協(xié)程。解決回調(diào)地獄的方式主要有兩種和協(xié)程。重點(diǎn)應(yīng)當(dāng)關(guān)注控制權(quán)轉(zhuǎn)讓的時機(jī),以及協(xié)程的運(yùn)作方式。 轉(zhuǎn)載請注明文章出處: https://tlanyan.me/php-review... PHP回顧系列目錄 PHP基礎(chǔ) web請求 cookie web響應(yīng) sess...
閱讀 3748·2021-11-23 09:51
閱讀 1594·2021-11-04 16:08
閱讀 3688·2021-09-02 09:54
閱讀 3729·2019-08-30 15:55
閱讀 2694·2019-08-30 15:54
閱讀 1047·2019-08-29 16:30
閱讀 2131·2019-08-29 16:15
閱讀 2408·2019-08-29 14:05