145장. HDFS2 구성 요소
Camel 버전 2.14에서 사용 가능
hdfs2 구성 요소를 사용하면 HDFS 2.x를 사용하여 HDFS 파일 시스템에서 /에서 메시지를 읽고 쓸 수 있습니다. HDFS는 HDFS의 중심부에 있는 분산 파일 시스템입니다.
Maven 사용자는 이 구성 요소에 대해 pom.xml
에 다음 종속성을 추가해야 합니다.
<dependency> <groupId>org.apache.camel</groupId> <artifactId>camel-hdfs2</artifactId> <version>x.x.x</version> <!-- use the same version as your Camel core version --> </dependency>
145.1. URI 형식
hdfs2://hostname[:port][/path][?options]
다음과 같은 형식으로 URI에 쿼리 옵션을 추가할 수 있습니다. ?option=value&option=value&…
경로는 다음과 같은 방식으로 처리됩니다.
- 소비자로서 파일인 경우 파일을 읽기만 합니다. 그렇지 않으면 구성된 패턴을 충족하는 경로 아래의 모든 파일을 스캔하는 디렉토리를 나타냅니다. 해당 디렉터리의 모든 파일은 동일한 유형이어야 합니다.
- 생산자로서 하나 이상의 분할 전략이 정의되면 경로는 디렉터리로 간주되며 해당 디렉터리 아래에 생산자가 구성된 UuidGenerator를 사용하여 이름이 지정된 분할당 다른 파일을 생성합니다.
hdfs2에서 사용하면 일반 모드에서 파일이 청크로 분할되어 청크당 메시지를 생성합니다. chunkSize 옵션을 사용하여 청크 크기를 구성할 수 있습니다. file 구성 요소를 사용하여 hdfs에서 읽고 일반 파일에 작성하려면 fileMode=Append를 사용하여 각 청크를 함께 추가할 수 있습니다.