144.2. 옵션

hostName

사용할 HDFS 호스트

문자열

port

사용할 HDFS 포트

8020

int

경로

사용할 디렉터리 경로입니다.

문자열

connectOnStartup (common)

프로듀서 / 소비자를 시작할 때 HDFS 파일 시스템에 연결할지 여부입니다. false인 경우 필요에 따라 연결이 생성됩니다. HDFS는 연결을 설정하는 데 15분 정도 걸릴 수 있습니다. 45 x 20의 재검증이 하드 코딩되었기 때문입니다. 이 옵션을 false로 설정하면 애플리케이션을 시작할 수 있으며 15분 동안 차단되지 않습니다.

true

boolean

fileSystemType (common)

HDFS를 사용하지 않고 로컬 java.io.File을 사용하도록 LOCAL로 설정합니다.

HDFS

HdfsFileSystemType

파일 유형 (공용)

사용할 파일 유형입니다. 자세한 내용은 다양한 파일 유형에 대한 HDFS HDFS 설명서를 참조하십시오.

NORMAL_FILE

HdfsFileType

키 유형 (공용)

순서 또는 맵 파일의 경우 키 유형입니다.

NULL

WritableType

소유자 (공용)

소비자가 파일을 선택하려면 파일 소유자가 이 소유자와 일치해야 합니다. 그렇지 않으면 파일을 건너뜁니다.

문자열

ValueType( 공용)

순서 또는 맵 파일의 경우 키 유형입니다.

BYTES

WritableType

bridgeErrorHandler (consumer)

소비자가 수신되는 메시지를 선택하려고 하는 동안 예외가 발생했음을 나타내는 Camel 라우팅 오류 처리기에 소비자를 브리징할 수 있습니다. 즉, 소비자가 수신되는 메시지를 선택하려고 하는 동안 예외가 발생되거나 이제 메시지로 처리되고 라우팅 오류 처리기에 의해 처리됩니다. 기본적으로 소비자는 org.apache.camel.spi.Exception handler를 사용하여 WARN 또는 ERROR 수준에서 로깅되고 무시됩니다.

false

boolean

모델 번호 (consumer)

디렉터리 스캔에 사용되는 패턴

*

문자열

sendEmptyMessageWhenIdle (consumer)

폴링 소비자가 파일을 폴링하지 않은 경우 이 옵션을 활성화하여 빈 메시지(인체 없음)를 보낼 수 있습니다.

false

boolean

예외 처리기 (consumer)

소비자가 사용자 지정 예외 처리기를 사용하도록 하려면 다음을 수행합니다. bridgeErrorHandler 옵션이 활성화되어 있으면 이 옵션이 사용되지 않습니다. 기본적으로 소비자는 예외를 처리하며 WARN 또는 ERROR 수준에서 로깅되고 무시됩니다.

ExceptionHandler

exchangePattern (consumer)

소비자가 교환을 생성할 때 교환 패턴을 설정합니다.

ExchangePattern

pollStrategy (consumer)

플러그형 org.apache.camel.PollingConsumerPollingStrategy를 사용하면 Exchange를 생성하고 Camel에서 라우팅하기 전에 일반적으로 폴링 작업 중에 발생한 오류 처리를 제어하기 위해 사용자 정의 구현을 제공할 수 있습니다.

PollingConsumerPoll Strategy

첨부 (producer)

기존 파일에 추가합니다. 일부 HDFS 파일 시스템이 추가 옵션을 지원하지는 않습니다.

false

boolean

덮어쓰기 (producer)

동일한 이름으로 기존 파일을 덮어쓸지 여부

true

boolean

Blocksize (advanced)

HDFS 블록의 크기

67108864

long

bufferSize (advanced)

HDFS에서 사용하는 버퍼 크기

4096

int

checkIdleInterval (advanced)

유휴 검사기 백그라운드 작업을 실행하는 빈도(밀리초 단위)입니다. 이 옵션은 splitter 전략이 IDLE인 경우에만 사용됩니다.

500

int

CHUNKSIZE (고급)

일반 파일을 읽을 때 청크당 메시지를 생성하는 청크로 분할됩니다.

4096

int

compressionCodec (advanced)

사용할 압축 코드입니다.

DEFAULT

HdfsCompressionCodec

compressionType (advanced)

사용할 압축 유형입니다(기본적으로 사용되지 않음)

NONE

CompressionType

openedSuffix (advanced)

읽기/쓰기를 위해 파일이 열리면 이 접미사로 파일 이름이 변경되어 쓰기 단계에서 읽지 않도록 합니다.

open

문자열

readSuffix (advanced)

파일을 읽고 나면 이 접미사로 이름이 변경되어 다시 읽지 않습니다.

read

문자열

복제 (고급)

HDFS 복제 요인

3

짧은

splitStrategy (advanced)

추가 모드에서 파일을 여는 현재 버전의ECDHE은 매우 안정적이지 않기 때문에 비활성화됩니다. 따라서 현재는 새 파일만 만들 수 있습니다. Camel HDFS 끝점은 이러한 방식으로 이 문제를 해결하려고 합니다. 분할 전략 옵션이 정의된 경우 hdfs 경로가 디렉터리로 사용되며 구성된 UuidGenerator를 사용하여 파일이 생성됩니다. 분할 조건이 충족될 때마다 새 파일이 생성됩니다. splitStrategy 옵션은 splitStrategy=ST:value,ST:value, where ST가 될 수 있는 문자열로 정의됩니다. 여기서 ST는 BYTES 새 파일이 생성되고, 쓰기 바이트 수가 새 파일이 생성될 때 이전이 닫히고 작성된 메시지의 수가 새 파일 IDLE 파일 값보다 길면 이전이 닫힙니다.

문자열

동기 (고급)

동기 처리를 엄격하게 사용해야 하는지 또는 Camel이 비동기 처리(지원되는 경우)를 사용할 수 있는지 여부를 설정합니다.

false

boolean

backoffErrorThreshold (scheduler)

backoffMultipler를 시작하기 전에 발생해야 하는 후속 오류 폴링(일부 오류 발생) 수입니다.

int

backoffIdleThreshold (scheduler)

backoffMultipler가 시작되기 전에 발생해야 하는 후속 유휴 폴링 수입니다.

int

backoffMultiplier (scheduler)

행에 여러 개의 유휴 상태/errors가 있는 경우 예약된 폴링 소비자 백오프를 허용합니다. 그러면 다음 실제 시도가 다시 발생하기 전에 건너뛸 폴링 수입니다. 이 옵션을 사용 중인 경우 backoffIdleThreshold 및/또는 backoffErrorThreshold도 구성해야 합니다.

int

지연 (scheduler)

다음 폴링 전 밀리초입니다. 60s(60초), 5m30s(5분 및 30초), 1h(1시간)와 같은 단위를 사용하여 시간 값을 지정할 수도 있습니다.

500

long

greedy (scheduler)

greedy가 활성화되면 이전에 폴링된 1개 이상의 메시지를 실행하면 ScheduledPollConsumer가 즉시 다시 실행됩니다.

false

boolean

initialDelay (scheduler)

첫 번째 폴링이 시작되기 전 밀리초입니다. 60s(60초), 5m30s(5분 및 30초), 1h(1시간)와 같은 단위를 사용하여 시간 값을 지정할 수도 있습니다.

1000

long

runLoggingLevel (scheduler)

소비자는 폴링할 때 시작/완전 로그 행을 기록합니다. 이 옵션을 사용하면 로깅 수준을 구성할 수 있습니다.

TRACE

LoggingLevel

scheduledExecutorService (scheduler)

소비자에 사용할 사용자 지정/공유 스레드 풀을 구성할 수 있습니다. 기본적으로 각 소비자에는 자체 단일 스레드 스레드 풀이 있습니다.

ScheduledExecutor Service

스케줄러 (scheduler)

camel-spring 또는 camel-quartz2 구성 요소에서 cron 스케줄러를 사용하려면 다음을 수행합니다.

none

ScheduledPollConsumer Scheduler

schedulerProperties (scheduler)

사용자 정의 스케줄러 또는 Quartz2, Spring 기반 스케줄러를 사용할 때 추가 속성을 구성하려면 다음을 수행합니다.

map

startScheduler (scheduler)

스케줄러를 자동으로 시작해야 하는지 여부입니다.

true

boolean

timeUnit (scheduler)

initialDelay 및 delay 옵션의 시간 단위입니다.

MILLISECONDS

TimeUnit

useFixedDelay (scheduler)

고정된 지연 또는 고정 속도가 사용되는 경우 제어합니다. 자세한 내용은 ScheduledExecutorService in JDK를 참조하십시오.

true

boolean