145.2. 옵션


HDFS2 구성 요소는 아래에 나열된 두 가지 옵션을 지원합니다.

이름설명기본유형

jAASConfiguration (일반)

JAAS의 보안에 지정된 구성을 사용하려면 다음을 수행합니다.

 

설정

resolveProperty Placeholders (advanced)

구성 요소 시작 시 속성 자리 표시자를 자체적으로 확인해야 하는지 여부입니다. String 유형의 속성만 속성 자리 표시자를 사용할 수 있습니다.

true

boolean

HDFS2 끝점은 URI 구문을 사용하여 구성됩니다.

hdfs2:hostName:port/path

다음 경로 및 쿼리 매개변수를 사용합니다.

145.2.1. 경로 매개변수 (3 매개변수):

이름설명기본유형

hostName

사용하기 위해 필요한 HDFS 호스트

 

문자열

port

사용할 HDFS 포트

8020

int

path

사용할 디렉터리 경로입니다.

 

문자열

145.2.2. 쿼리 매개변수(38 매개변수):

이름설명기본유형

connectOnStartup (공용)

생산자/소유자를 시작할 때 HDFS 파일 시스템에 연결할지 여부입니다. false인 경우 연결이 온디맨드로 생성됩니다. HDFS는 연결을 설정하는 데 15분 정도 걸릴 수 있습니다. 45 x 20 sec redelivery가 하드 코딩되어 있기 때문입니다. 이 옵션을 false로 설정하면 애플리케이션이 시작할 수 있으며 15분까지 차단되지 않습니다.

true

boolean

fileSystemType (common)

대신 HDFS이지만 로컬 java.io.File을 사용하지 않도록 LOCAL로 설정합니다.

HDFS

HdfsFileSystemType

파일 유형 (공용)

사용할 파일 유형입니다. 자세한 내용은 HDFS의 다양한 파일 유형에 대한 문서를 참조하십시오.

NORMAL_FILE

HdfsFileType

keyType (common)

순서 또는 맵 파일의 경우 키 유형입니다.

NULL

WritableType

소유자 (일반)

소비자가 파일을 선택하려면 파일 소유자가 이 소유자와 일치해야 합니다. 그렇지 않으면 파일을 건너뜁니다.

 

문자열

valueType (common)

순서 또는 맵 파일의 경우 키 유형입니다.

BYTES

WritableType

bridgeErrorHandler (consumer)

Camel 라우팅 오류 처리기에 소비자를 브리징할 수 있습니다. 즉, 소비자가 들어오는 메시지를 선택하려고 하는 동안 발생한 모든 예외가 이제 메시지로 처리되고 라우팅 오류 처리기에서 처리됩니다. 기본적으로 소비자는 org.apache.camel.spi.ExceptionHandler를 사용하여 WARN 또는 ERROR 수준에서 기록되고 무시됩니다.

false

boolean

패턴 (Consumer)

디렉터리를 스캔하는 데 사용되는 패턴

*

문자열

sendEmptyMessageWhenIdle (consumer)

폴링 소비자가 파일을 폴링하지 않은 경우 이 옵션을 활성화하여 대신 빈 메시지(본체 없음)를 보낼 수 있습니다.

false

boolean

exceptionHandler (consumer)

사용자가 사용자 지정 ExceptionHandler를 사용하도록 하려면 다음을 수행합니다. bridgeErrorHandler 옵션이 활성화되어 있으면 이 옵션이 사용되지 않습니다. 기본적으로 소비자는 WARN 또는 ERROR 수준에서 기록되고 무시됩니다.

 

ExceptionHandler

exchangePattern (consumer)

소비자가 교환을 생성할 때 교환 패턴을 설정합니다.

 

ExchangePattern

pollStrategy (consumer)

플러그형 org.apache.camel.PollingConsumerPollingStrategy를 사용하면 교환이 생성되고 Camel에서 라우팅되기 전에 일반적으로 폴링 작업 중에 발생한 오류 처리를 제어하기 위해 사용자 정의 구현을 제공할 수 있습니다.

 

PollingConsumerPoll Strategy

추가 (producer)

기존 파일에 추가합니다. 일부 HDFS 파일 시스템이 추가 옵션을 지원하는 것은 아닙니다.

false

boolean

덮어쓰기 (producer)

기존 파일을 동일한 이름으로 덮어쓸 지 여부

true

boolean

Blocksize (advanced)

HDFS 블록의 크기

67108864

long

bufferSize (advanced)

HDFS에서 사용하는 버퍼 크기

4096

int

checkIdleInterval (advanced)

유휴 검사 배경 작업을 실행하는 빈도(밀리초 단위)입니다. 이 옵션은 splitter 전략이 IDLE인 경우에만 사용됩니다.

500

int

CHUNKSIZE (advanced)

일반 파일을 읽을 때 청크로 분할되어 청크당 메시지를 생성합니다.

4096

int

compressionCodec (advanced)

사용할 압축 Codec

DEFAULT

HdfsCompressionCodec

compressionType (advanced)

사용할 압축 유형(기본적으로 사용되지 않음)

NONE

CompressionType

openedSuffix (advanced)

쓰기/쓰기를 위해 파일이 열리면 쓰기 단계에서 파일을 읽지 않도록 파일의 이름이 이 접미사로 변경됩니다.

열기

문자열

readSuffix (advanced)

파일을 읽은 후에는 다시 읽지 않도록 이 접미사로 이름이 변경됩니다.

읽기

문자열

복제 (고급)

HDFS 복제 요인

3

short

splitStrategy (advanced)

현재 버전의 Cryostat에서는 매우 신뢰할 수 없으므로 append 모드에서 파일을 열 수 없습니다. 따라서 현재는 새 파일만 생성할 수 있습니다. Camel HDFS 엔드포인트는 이러한 방식으로 이 문제를 해결하려고 합니다. 분할 전략 옵션이 정의된 경우 hdfs 경로가 디렉터리로 사용되며, 구성된 UuidGenerator를 사용하여 파일이 생성됩니다. 분할 조건이 충족될 때마다 새 파일이 생성됩니다. splitStrategy 옵션은 다음 구문을 사용하여 문자열로 정의됩니다. splitStrategy=ST:value,ST:value,…​ 여기서 ST can be: BYTES a new file is created, and the old is closed when the number of written bytes is more than MESSAGES a new file is created, and the old is closed when the number of written messages is more than value IDLE is created, and the old is closed when the number of written messages is created.

 

문자열

동기 (고급)

동기 처리를 엄격하게 사용해야 하는지 또는 Camel이 비동기 처리를 사용할 수 있는지 여부를 설정합니다(지원되는 경우).

false

boolean

backoffErrorThreshold (scheduler)

백오프Multipler를 시작하기 전에 수행해야 하는 후속 오류 폴링(일부 오류로 인해 실패)의 수입니다.

 

int

backoffIdleThreshold (scheduler)

backoffMultipler가 시작되기 전에 수행해야 하는 후속 유휴 폴링의 수입니다.

 

int

backoffMultiplier (scheduler)

행에 후속 유휴/errors가 있는 경우 예약된 폴링 소비자 백오프를 허용하려면 다음을 수행합니다. 그러면 다음 실제 시도가 다시 발생하기 전에 건너뛸 폴링 수입니다. 이 옵션이 사용 중인 경우 backoffIdleThreshold 및/또는 backoffErrorThreshold도 구성해야 합니다.

 

int

지연 (scheduler)

다음 폴링 전의 밀리초입니다. 60초(60초), 5m30s(5분 및 30초) 및 1h(1시간)를 사용하여 시간 값을 지정할 수도 있습니다.

500

long

greedy (scheduler)

greedy가 활성화된 경우 이전 실행이 1개 이상의 메시지를 폴링하면 ScheduledPollConsumer가 즉시 다시 실행됩니다.

false

boolean

initialDelay (scheduler)

첫 번째 폴링이 시작되기 전의 밀리초입니다. 60초(60초), 5m30s(5분 및 30초) 및 1h(1시간)를 사용하여 시간 값을 지정할 수도 있습니다.

1000

long

runLoggingLevel (scheduler)

소비자는 폴링 시 시작/완료 로그 행을 기록합니다. 이 옵션을 사용하면 로깅 수준을 구성할 수 있습니다.

TRACE

LoggingLevel

scheduledExecutorService (scheduler)

소비자에 사용할 사용자 지정/공유 스레드 풀을 구성할 수 있습니다. 기본적으로 각 소비자에는 자체 단일 스레드 스레드 풀이 있습니다.By default, each consumer has its own single threaded thread pool.

 

ScheduledExecutor 서비스

scheduler (scheduler)

camel-spring 또는 camel-quartz2 구성 요소의 cron 스케줄러 사용

none

ScheduledPollConsumer Scheduler

schedulerProperties (scheduler)

사용자 지정 스케줄러 또는 Quartz2, Spring 기반 스케줄러를 사용할 때 추가 속성을 구성하려면 다음을 수행합니다.

 

map

startScheduler (scheduler)

스케줄러를 자동으로 시작해야 하는지 여부입니다.

true

boolean

timeUnit (scheduler)

초기 지연 및 지연 옵션의 시간 단위입니다.

밀리초

TimeUnit

useFixedDelay (scheduler)

고정된 지연 또는 고정 속도가 사용되는지 여부를 제어합니다. 자세한 내용은 JDK의 ScheduledExecutorService를 참조하십시오.

true

boolean

Red Hat logoGithubRedditYoutubeTwitter

자세한 정보

평가판, 구매 및 판매

커뮤니티

Red Hat 문서 정보

Red Hat을 사용하는 고객은 신뢰할 수 있는 콘텐츠가 포함된 제품과 서비스를 통해 혁신하고 목표를 달성할 수 있습니다.

보다 포괄적 수용을 위한 오픈 소스 용어 교체

Red Hat은 코드, 문서, 웹 속성에서 문제가 있는 언어를 교체하기 위해 최선을 다하고 있습니다. 자세한 내용은 다음을 참조하세요.Red Hat 블로그.

Red Hat 소개

Red Hat은 기업이 핵심 데이터 센터에서 네트워크 에지에 이르기까지 플랫폼과 환경 전반에서 더 쉽게 작업할 수 있도록 강화된 솔루션을 제공합니다.

© 2024 Red Hat, Inc.