レート制限
EMQXでは、接続速度およびメッセージ速度に対して制限を指定できます。これは、システムの入口での過負荷を回避し、予測可能なスループットでシステムの安定性を保証するバックプレッシャー方式を用いています。
リスナー単位のリミッター
リミッターはリスナー単位で動作可能です。EMQXは以下の種類のリミッターを使用してレート制限を指定します。
| 種類 | ダッシュボードUI | 説明 | 過負荷時の動作 |
|---|---|---|---|
| bytes_rate | クライアントごとの最大メッセージパブリッシュトラフィック | 単一クライアントが1秒あたりにパブリッシュするメッセージのバイト数。 | クライアントからのメッセージ受信を一時停止 |
| bytes_burst | クライアントごとの最大メッセージパブリッシュバースト | 通常のData Publishing Rateに基づく、単一クライアントがバーストで送信可能なバイト数。 | クライアントからのメッセージ受信を一時停止 |
| messages_rate | クライアントごとの最大メッセージパブリッシュレート | 単一クライアントが1秒あたりにパブリッシュするメッセージ数。 | クライアントからのメッセージ受信を一時停止 |
| messages_burst | クライアントごとの最大メッセージパブリッシュバースト | 通常のMessages Publish Rateに加え、単一クライアントがバーストで送信可能なメッセージ数。 | クライアントからのメッセージ受信を一時停止 |
| max_conn_rate | リスナーごとの最大接続レート | 現在のリスナーに対する1秒あたりの接続数。 | 新規接続の受け入れを一時停止 |
| max_conn_burst | リスナーごとの最大接続バースト | リスナーがバーストで受け入れ可能な最大接続数。 | 新規接続の受け入れを一時停止 |
配信レートリミッターはリスナー単位で動作しますが、過負荷時の動作が異なります。詳細は配信レートリミッターをご覧ください。
リスナー単位リミッターの設定
ダッシュボードの 管理 -> リスナー ページで、各リスナーのレート制限を設定できます。
または、設定ファイルで設定可能です。例として、デフォルトのTCPリスナーにリミッターを設定する場合、emqx.confファイルに以下のように記述します。
listeners.tcp.default {
bind = "0.0.0.0:1883"
max_conn_rate = "1000/s"
max_conn_burst = "10000/60m"
messages_rate = "1000/s"
messages_burst = "10000/60m"
bytes_rate = "1MB/s"
bytes_burst = "100MB/60m"
}この設定は以下を意味します。
- リスナーの接続確立の最大レートは1秒あたり1000接続。
- リスナーは60分間に最大10,000接続のバーストを許容。
- クライアントごとのメッセージパブリッシュ最大レートは1秒あたり1000メッセージ。
- リスナーは60分間に最大10,000メッセージのバーストを許容。
- クライアントごとのデータパブリッシュ最大レートは1秒あたり1MB。
- リスナーは60分間に最大100MBのバーストを許容。
ノード単位のリミッター
リミッターはノード単位でも動作し、各EMQXノードへの個々のクライアント接続速度や、ノードへのメッセージ/データパブリッシュ速度を制限します。EMQXノードは以下の種類のリミッターを使用してレート制限を指定します。
| 種類 | ダッシュボードUI | 説明 | 過負荷時の動作 |
|---|---|---|---|
| bytes_rate | データパブリッシュレート | 単一クライアントが各EMQXノードにパブリッシュするデータ量(バイト単位)。 | 制限到達時、QoS 0メッセージは破棄され、QoS 1およびQoS 2メッセージは「Quota Exceeded」エラー(0x97)で拒否されます。 |
| bytes_burst | データパブリッシュバースト | 通常のdata publish rateに基づく、クライアントごとに許可されるバーストデータ量。 | 制限到達時、QoS 0メッセージは破棄され、QoS 1およびQoS 2メッセージは「Quota Exceeded」エラー(0x97)で拒否されます。 |
| messages_rate | メッセージパブリッシュレート | 単一クライアントが各EMQXノードにパブリッシュするメッセージレート。 | 制限到達時、QoS 0メッセージは破棄され、QoS 1およびQoS 2メッセージは「Quota Exceeded」エラー(0x97)で拒否されます。 |
| messages_burst | メッセージパブリッシュバースト | 通常のmessage publishing rateに基づく、ノードごとに許可されるバーストメッセージ数。 | 制限到達時、QoS 0メッセージは破棄され、QoS 1およびQoS 2メッセージは「Quota Exceeded」エラー(0x97)で拒否されます。 |
| max_conn_rate | 最大接続レート | ノードごとに受け入れる新規接続のレート。 | 制限到達時、EMQXはAcceptキューでの接続処理を一時停止し、新規接続の遅延または拒否が発生します。 |
| max_conn_burst | 最大接続バースト | ノードがバーストで受け入れ可能な最大接続数。 | 新規接続の受け入れを一時停止します。 |
ノード単位リミッターの設定
ダッシュボードの 管理 -> MQTT設定 ページで、各ノードのレート制限を設定できます。
または、設定ファイルで設定可能です。例として、emqx.confに以下のように記述します。
mqtt.limiter {
max_conn_rate = "1000/s"
max_conn_burst = "10000/60m"
messages_rate = "500/10s"
messages_burst = "10000/60m"
bytes_rate = "500KB/s"
bytes_burst = "100MB/60m"
}ゾーン単位のリミッターは、zoneセクション内に以下のように埋め込めます。
zones.my_zone.mqtt {
limiter {...}
}- ノードは10秒あたり最大500メッセージを受信可能で、それを超えるメッセージは破棄または拒否されます。
- ノードは60分間に最大10,000メッセージのバーストを許容します。
- ノードは10秒あたり最大500MBのデータを受信可能で、それを超えるデータは破棄または拒否されます。
- ノードは60分間に最大100MBのバーストを許容します。
配信レートリミッター
上記のパブリッシュ側リミッターに加え、EMQXはサブスクライバー側の配信レート制限もサポートしています。これらのリミッターは、どのクライアントがパブリッシュしたかに関わらず、EMQXがサブスクライブしているクライアントにメッセージを配信する速度を制御します。
| 種類 | ダッシュボードUI | 説明 | 過負荷時の動作 |
|---|---|---|---|
| delivery_messages_rate | クライアントごとの最大メッセージ配信レート | ノードごとに単一サブスクライバーに配信されるメッセージの最大レート。 | QoS 0メッセージは破棄されます。QoS 1およびQoS 2メッセージは内部キューに入り、リミッター設定に基づく遅延後に再試行されます。 |
| delivery_messages_burst | クライアントごとの最大メッセージ配信バースト | delivery_messages_rateに加え許可されるバースト。 | 上記と同様。 |
| delivery_bytes_rate | クライアントごとの最大メッセージ配信トラフィック | ノードごとに単一サブスクライバーに配信されるデータ量(バイト単位)の最大レート。 | QoS 0メッセージは破棄されます。QoS 1およびQoS 2メッセージは内部キューに入り、リミッター設定に基づく遅延後に再試行されます。 |
| delivery_bytes_burst | クライアントごとの最大メッセージ配信トラフィックバースト | delivery_bytes_rateに加え許可されるバースト。 | 上記と同様。 |
パブリッシュ側リミッターと異なり、配信リミッターはチャネル単位のみで動作します。クライアント接続ごとに適用され、ゾーンやリスナーグループ間で共有されません。
TIP
配信レートリミッターはメモリーセッション(durable_sessions.enable = false)でのみサポートされます。永続セッションが有効な場合は効果がありません。
配信レートリミッターの設定
ダッシュボードの 管理 -> リスナー ページで、各リスナーの配信レート制限を設定できます。
または、設定ファイルで設定可能です。例として、デフォルトのTCPリスナーに配信レートリミッターを設定する場合、emqx.confに以下のように記述します。
listeners.tcp.default {
bind = "0.0.0.0:1883"
delivery_messages_rate = "100/s"
delivery_messages_burst = "500/10s"
delivery_bytes_rate = "1MB/s"
delivery_bytes_burst = "10MB/10s"
}この設定は以下を意味します。
- 各サブスクライバーはEMQXから1秒あたり最大100メッセージを受信可能。超過したQoS 0メッセージは破棄され、QoS 1/2メッセージはキューに入り再試行されます。
- 各サブスクライバーは1秒あたり最大1MBのメッセージデータを受信可能。超過時の動作は上記と同様です。
未指定の場合、デフォルト値はinfinityであり、配信側レート制限を必要としない既存のデプロイとの後方互換性を維持します。
レート単位
時間単位
レート値でサポートされる時間単位は以下の通りです。
- s : 秒
- m : 分
- h : 時間
- d : 日
時間単位は間隔値としても使用可能で、例えば 1000/10s は「10秒ごとに1000回の制限」を意味します。
サイズ単位
レート値でサポートされるサイズ単位は以下の通りです。
- KB : キロバイト
- MB : メガバイト
- GB : ギガバイト