跳转到主内容
趣航编程网 - 趣学编程,启航技术之路!

PHP实现消息队列_KafkaRabbitMQ对比选择【介绍】

中小规模PHP业务优先选RabbitMQ;高吞吐强顺序场景才用Kafka。RabbitMQ需显式设heartbeat、delivery_mode=2、禁用auto-ack并手动nack+requeue,延迟任务用delay插件;Kafka在PHP中需手动flush、管控offset、调小缓冲区,否则易丢消息。 中小规模 PHP 业务别上 Kafka,RabbitMQ 就够用;真要扛每秒万级日志或 binlog 同步,才值得切 Kafka——但得接受 PHP 层要自己兜底 offset、flush 和消息丢失风险。 RabbitMQ 在 PHP 里怎么避免消息静默丢失 很多人设了
delivery_mode => 2
、声明了
durable => true
,就以为消息“进了磁盘=稳了”,结果消费者一崩,任务就没了。 必须关掉 auto-ack:
$channel->basic_consume($queue, '', false, false, false, false, $callback)
,否则消息出队即删
heartbeat
参数不能省,推荐显式设为
30
,不然中间网络设备(比如 NAT 网关)可能静默断连 消费者 crash 后想重试?得靠
$channel->basic_nack($delivery_info['delivery_tag'], false, true)
+ 手动 requeue,不是开个参数就自动回滚 延迟任务别手写 sleep 或轮询,装
rabbitmq-delayed-message-exchange
插件,声明 exchange 时加
x-delayed-type: direct
即可 Kafka 的 produce() 在 PHP-FPM 里为什么发着发着就丢消息 因为
rdkafka
的
produce()
是纯异步写缓冲,PHP 请求结束、FPM worker 退出,缓冲区里没 flush 的消息就直接蒸发了。 每次
produce()
后必须跟
$producer->poll(0)
或等
$producer->flush(1000)
成功,否则不保险
queue.buffering.max.messages
默认是 100000,FPM 场景下建议调小到 100–1000,减少未 flush 消息量 consumer 不设
enable.auto.commit=false
,或者 commit 失败不重试,就会跳消息或重复消费 PHP 进程短命,
retention.ms
设再大也没用——如果 consumer 拉得太慢,Kafka 已经把老消息清掉了 Redis List 队列在什么情况下能用、什么情况下千万别碰 它快、轻、零依赖,但只适合“丢了也不心疼”的场景。一旦你开始写
BRPOP task_queue 0
,就已经踩进坑了。 PHP 8.5.5 PHP 8.5.5 是 PHP 8.5 分支的维护更新版本。该版本延续了“小步快跑”的迭代逻辑,通过深度错误修复、底层性能微调以及安全加固,旨在为开发者提供一个更健壮、更高效的运行环境。该版本严格遵守语义化版本规范,不包含破坏性变更。 下载 立即学习 “ PHP免费学习笔记(深入) ”; 超时必须设非零值,比如
BRPOP task_queue 10
,配合脚本重试逻辑,否则进程卡死或被 kill 后消息永久消失 没有 ACK,
BRPOP
返回即从链表删,消费者处理中途崩溃 = 消息彻底丢失 多个 worker 同时
BRPOP
同一个 key,看似负载均衡,实则只是 Redis 单线程轮流返回,根本不是并发消费 想实现延时重试?得自己用
ZSET
存时间戳 + 定时脚本轮询,不是原生能力,维护成本远超收益 MySQL 做队列为什么必须加
FOR UPDATE SKIP LOCKED
不加这个,高并发下两个 worker 同时查到同一条
status = 0
的记录,都 update 成 1,任务就被执行两次——这在订单、支付类业务里是致命问题。
SELECT ... FOR UPDATE
默认会阻塞第二个查询,造成 worker 等锁、响应变慢;
SKIP LOCKED
让它直接跳过已锁行,查下一条,这才是真正并发出队 必须包裹在事务里:
BEGIN
→
SELECT ... FOR UPDATE SKIP LOCKED
→
UPDATE ... SET status = 1
→
COMMIT
MySQL 5.7 及更早版本对
SKIP LOCKED
支持不完整,线上用前务必验证执行计划是否真的跳过锁行 最常被忽略的点:RabbitMQ 和 Kafka 在 PHP 里根本不是同一类抽象。RabbitMQ 的
basic_publish
是同步调用,发完就返回;Kafka 的
produce
是异步写缓冲——混用时,光看函数名容易误判语义,结果在 FPM 里发完不 poll,消息就没了。

相关文章