搜索

第 143 章 HDFS 组件(已弃用)

download PDF

可作为 Camel 版本 2.8 使用

hdfs 组件允许您读取和写入来自 HDFS 文件系统的消息。HDFS 是 Hadoop 的核心分布式文件系统。

Maven 用户需要将以下依赖项添加到其 pom.xml 中:

<dependency>
    <groupId>org.apache.camel</groupId>
    <artifactId>camel-hdfs</artifactId>
    <version>x.x.x</version>
    <!-- use the same version as your Camel core version -->
</dependency>

143.1. URI 格式

hdfs://hostname[:port][/path][?options]

您可以以以下格式将查询选项附加到 URI 中,?option=value&option=value&amp;…​
。路径会按照以下方式处理:

  1. 作为使用者,如果文件是文件,它将只读取文件,否则如果它代表一个目录,它会扫描路径下的所有文件满足配置模式。该目录下的所有文件都必须是同一类型。
  2. 作为制作者,如果定义至少一个拆分策略,则路径被视为目录,并且制作者会在这个目录下使用配置的 UuidGenerator 创建不同的文件。

备注

当从 hdfs 消耗时,在正常模式中,文件被分成块,每个块生成一个信息。您可以使用 chunkSize 选项配置块的大小。如果要从 hdfs 读取并使用文件组件写入常规文件,您可以使用 fileMode=Append 将每个块附加在一起。

 

Red Hat logoGithubRedditYoutubeTwitter

学习

尝试、购买和销售

社区

关于红帽文档

通过我们的产品和服务,以及可以信赖的内容,帮助红帽用户创新并实现他们的目标。

让开源更具包容性

红帽致力于替换我们的代码、文档和 Web 属性中存在问题的语言。欲了解更多详情,请参阅红帽博客.

關於紅帽

我们提供强化的解决方案,使企业能够更轻松地跨平台和环境(从核心数据中心到网络边缘)工作。

© 2024 Red Hat, Inc.