145장. HDFS2 구성 요소


Camel 버전 2.14에서 사용 가능

hdfs2 구성 요소를 사용하면 HDFS 2.x를 사용하여 HDFS 파일 시스템에서 /에서 메시지를 읽고 쓸 수 있습니다. HDFS는 HDFS의 중심부에 있는 분산 파일 시스템입니다.

Maven 사용자는 이 구성 요소에 대해 pom.xml 에 다음 종속성을 추가해야 합니다.

<dependency>
    <groupId>org.apache.camel</groupId>
    <artifactId>camel-hdfs2</artifactId>
    <version>x.x.x</version>
    <!-- use the same version as your Camel core version -->
</dependency>

145.1. URI 형식

hdfs2://hostname[:port][/path][?options]

다음과 같은 형식으로 URI에 쿼리 옵션을 추가할 수 있습니다. ?option=value&option=value&…​
경로는 다음과 같은 방식으로 처리됩니다.

  1. 소비자로서 파일인 경우 파일을 읽기만 합니다. 그렇지 않으면 구성된 패턴을 충족하는 경로 아래의 모든 파일을 스캔하는 디렉토리를 나타냅니다. 해당 디렉터리의 모든 파일은 동일한 유형이어야 합니다.
  2. 생산자로서 하나 이상의 분할 전략이 정의되면 경로는 디렉터리로 간주되며 해당 디렉터리 아래에 생산자가 구성된 UuidGenerator를 사용하여 이름이 지정된 분할당 다른 파일을 생성합니다.

hdfs2에서 사용하면 일반 모드에서 파일이 청크로 분할되어 청크당 메시지를 생성합니다. chunkSize 옵션을 사용하여 청크 크기를 구성할 수 있습니다. file 구성 요소를 사용하여 hdfs에서 읽고 일반 파일에 작성하려면 fileMode=Append를 사용하여 각 청크를 함께 추가할 수 있습니다.

Red Hat logoGithubRedditYoutubeTwitter

자세한 정보

평가판, 구매 및 판매

커뮤니티

Red Hat 문서 정보

Red Hat을 사용하는 고객은 신뢰할 수 있는 콘텐츠가 포함된 제품과 서비스를 통해 혁신하고 목표를 달성할 수 있습니다.

보다 포괄적 수용을 위한 오픈 소스 용어 교체

Red Hat은 코드, 문서, 웹 속성에서 문제가 있는 언어를 교체하기 위해 최선을 다하고 있습니다. 자세한 내용은 다음을 참조하세요.Red Hat 블로그.

Red Hat 소개

Red Hat은 기업이 핵심 데이터 센터에서 네트워크 에지에 이르기까지 플랫폼과 환경 전반에서 더 쉽게 작업할 수 있도록 강화된 솔루션을 제공합니다.

© 2024 Red Hat, Inc.