消费者
August 26, 2021 · View on GitHub
消费者配置
类名:longlang\phpkafka\Consumer\ConsumerConfig
支持构造方法传入数组赋值
配置参数
| 参数名 | 说明 | 默认值 |
|---|---|---|
| connectTimeout | 连接超时时间(单位:秒,支持小数),为-1则不限制 | -1 |
| sendTimeout | 发送超时时间(单位:秒,支持小数),为-1则不限制 | -1 |
| recvTimeout | 接收超时时间(单位:秒,支持小数),为-1则不限制 | -1 |
| clientId | Kafka 客户端标识,不同的消费者进程请使用不同的设置 | null |
| maxWriteAttempts | 最大写入尝试次数 | 3 |
| client | 使用哪个 Kafka 客户端类,默认为null时根据场景自动识别 | null |
| socket | 使用哪个 Kafka Socket 类,默认为null时根据场景自动识别 | null |
| brokers | 别名 broker,格式:'127.0.0.1:9092,127.0.0.1:9093' 或 ['127.0.0.1:9092','127.0.0.1:9093'] | null |
| bootstrapServers | 别名bootstrapServer,引导服务器,如果配置了该值,会自动连接该服务器,并自动更新 brokers。格式:'127.0.0.1:9092,127.0.0.1:9093' 或 ['127.0.0.1:9092','127.0.0.1:9093'] | null |
| updateBrokers | 是否自动更新 brokers | true |
| interval | 未获取消息到消息时,延迟多少秒再次尝试,默认为0则不延迟(单位:秒,支持小数) | 0 |
| groupId | 分组 ID | null |
| memberId | 用户 ID | null |
| groupInstanceId | 分组实例 ID,不同的消费者进程请使用不同的设置 | null |
| sessionTimeout | 如果超时后没有收到心跳信号,则协调器会认为该用户死亡。(单位:秒,支持小数) | 60 |
| rebalanceTimeout | 重新平衡组时,协调器等待每个成员重新加入的最长时间(单位:秒,支持小数)。 | 60 |
| topic | 主题名称,支持同时消费多个主题 | null |
| replicaId | 副本 ID | -1 |
| rackId | 机架编号 | '' |
| autoCommit | 自动提交 offset | true |
| groupRetry | 分组操作,匹配预设的错误码时,自动重试次数 | 5 |
| groupRetrySleep | 分组操作重试延迟,单位:秒 | 1 |
| offsetRetry | 偏移量操作,匹配预设的错误码时,自动重试次数 | 5 |
| groupHeartbeat | 分组心跳时间间隔,单位:秒 | 3 |
| autoCreateTopic | 自动创建主题 | true |
| partitionAssignmentStrategy | 消费者分区分配策略,可选:范围分配-longlang\phpkafka\Consumer\Assignor\RangeAssignor、轮询分配-\longlang\phpkafka\Consumer\Assignor\RoundRobinAssignor、粘性分配-\longlang\phpkafka\Consumer\Assignor\StickyAssignor | longlang\phpkafka\Consumer\Assignor\RangeAssignor |
| exceptionCallback | 遇到无法在recv()协程抛出的异常时,调用此回调。格式:function(\Exception $e){} | null |
| minBytes | 最小字节数 | 1 |
| maxBytes | 最大字节数 | 128 * 1024 * 1024 |
| maxWait | 最大等待时间,单位:秒 | 1 |
| sasl | SASL身份认证信息。为空则不发送身份认证信息 详情 | [] |
| ssl | SSL链接相关信息,为空则不使用SSL 详情 | null |
异步消费(回调)
代码示例:
use longlang\phpkafka\Consumer\ConsumeMessage;
use longlang\phpkafka\Consumer\Consumer;
use longlang\phpkafka\Consumer\ConsumerConfig;
function consume(ConsumeMessage $message)
{
var_dump($message->getKey() . ':' . $message->getValue());
// $consumer->ack($message); // autoCommit设为false时,手动提交
}
$config = new ConsumerConfig();
$config->setBroker('127.0.0.1:9092');
$config->setTopic('test'); // 主题名称
$config->setGroupId('testGroup'); // 分组ID
$config->setClientId('test'); // 客户端ID,不同的消费者进程请使用不同的设置
$config->setGroupInstanceId('test'); // 分组实例ID,不同的消费者进程请使用不同的设置
$config->setInterval(0.1);
$consumer = new Consumer($config, 'consume');
$consumer->start();
同步消费
代码示例:
use longlang\phpkafka\Consumer\Consumer;
use longlang\phpkafka\Consumer\ConsumerConfig;
$config = new ConsumerConfig();
$config->setBroker('127.0.0.1:9092');
$config->setTopic('test'); // 主题名称
$config->setGroupId('testGroup'); // 分组ID
$config->setClientId('test_custom'); // 客户端ID,不同的消费者进程请使用不同的设置
$config->setGroupInstanceId('test_custom'); // 分组实例ID,不同的消费者进程请使用不同的设置
$consumer = new Consumer($config);
while(true) {
$message = $consumer->consume();
if($message) {
var_dump($message->getKey() . ':' . $message->getValue());
$consumer->ack($message); // 手动提交
}
sleep(1);
}
SASL支持
相关配置
| 参数名 | 说明 | 默认值 |
|---|---|---|
| type | SASL授权对应的类。PLAIN为\longlang\phpkafka\Sasl\PlainSasl::class | '' |
| username | 账号 | '' |
| password | 密码 | '' |
代码示例:
use longlang\phpkafka\Consumer\Consumer;
use longlang\phpkafka\Consumer\ConsumerConfig;
$config = new ConsumerConfig();
// .... 你的其他配置
$config->setSasl([
"type"=>\longlang\phpkafka\Sasl\PlainSasl::class,
"username"=>"admin",
"password"=>"admin-secret"
]);
$consumer = new Consumer($config);
// .... 你的业务代码
SSL支持
类名:longlang\phpkafka\Config\SslConfig
支持构造方法传入数组赋值
配置参数
| 参数名 | 说明 | 默认值 |
|---|---|---|
| open | 是否开启SSL传输加密 | false |
| compression | 是否开启压缩 | true |
| certFile | cert证书存放路径 | '' |
| keyFile | 私钥存放路径 | '' |
| passphrase | cert证书密码 | '' |
| peerName | 服务器主机名。默认为链接的host | '' |
| verifyPeer | 是否校验远端证书 | false |
| verifyPeerName | 是否校验远端服务器名称 | false |
| verifyDepth | 如果证书链条层次太深,超过了本选项的设定值,则终止验证。 默认不校验层级 | 0 |
| allowSelfSigned | 是否允许自签证书 | false |
| cafile | CA证书路径 | '' |
| capath | CA证书目录。会自动扫描该路径下所有pem文件 | '' |
代码示例:
use longlang\phpkafka\Consumer\Consumer;
use longlang\phpkafka\Consumer\ConsumerConfig;
use longlang\phpkafka\Config\SslConfig;
$config = new ConsumerConfig();
// .... 你的其他配置
$sslConfig = new SslConfig();
$sslConfig->setOpen(true);
$sslConfig->setVerifyPeer(true);
$sslConfig->setAllowSelfSigned(true);
$sslConfig->setCafile("/kafka-client/.github/kafka/cert/ca-cert");
$config->setSsl($sslConfig);
$consumer = new Consumer($config);
// .... 你的业务代码