第 8 章 处理大量消息
客户端可能会发送可能会超过代理内部缓冲大小的大信息,从而导致意外错误。要防止这种情况,您可以将代理配置为在消息大于指定最小值时将消息存储为文件。以这种方式处理大量消息意味着代理不会将消息保存在内存中。相反,您可以指定磁盘上或数据库表中存储大型消息文件的目录。
当代理将消息存储为大消息时,队列会在大型消息目录或数据库表中保留对文件的引用。
大型消息处理可用于核心协议、AMQP、OpenWire 和 STOMP 协议。
对于核心协议和 OpenWire 协议,客户端在其连接配置中指定最小大的消息大小。对于 AMQP 和 STOMP 协议,您可以在代理配置中为各个协议定义的接收器中最少的大消息大小。
建议您 不要将 不同的协议用于生成和使用大型消息。为此,代理可能需要对消息执行多次转换。例如,假设您想要使用 AMQP 协议发送消息并使用 OpenWire 接收消息。在这种情况下,代理必须首先读取大信息正文,并将其转换为使用 Core 协议。然后,代理必须执行另一转换,这一次到 OpenWire 协议。诸如这样的消息转换会给代理带来大量处理开销。
您为上述任何协议指定的最小大消息大小都受到系统资源(如可用磁盘空间量)以及消息大小的影响。建议您使用多个值运行性能测试来确定适当的大小。
本节中的步骤显示如何:
- 配置代理以存储大型信息
- 为大型消息处理配置 AMQP 和 STOMP 协议的接收器
本节还链接有关配置 AMQ 核心协议和 AMQ OpenWire JMS 客户端以便处理大量消息的其他资源。
8.1. 配置代理以进行大型消息处理
以下流程演示了如何指定磁盘上的目录或代理在其中存储大型消息文件的数据库表。
流程
-
打开
<broker_instance_dir>/etc/broker.xml
配置文件。 指定代理存储大型消息文件的位置。
如果您在磁盘上存储大型消息,请在
核心
元素中添加large-messages-directory
参数,并指定文件系统位置。例如:<configuration> <core> ... <large-messages-directory>/path/to/my-large-messages-directory</large-messages-directory> ... </core> </configuration>
注意如果您没有明确为
large-messages-directory
指定值,代理将使用默认值<broker_instance_dir>/data/largemessages
如果您在数据库表中存储大型消息,请将
large-message-table
参数添加到database-store
元素并指定一个值。例如:<store> <database-store> ... <large-message-table>MY_TABLE</large-message-table> ... </database-store> </store>
注意如果没有为
large-message-table
明确指定值,代理将使用默认值LARGE_MESSAGE_TABLE
。
其它资源
- 有关配置数据库存储的详情请参考 第 6.2 节 “在数据库中持久保留消息数据”。