78장. tokenize

token

문자열

tokenizer(예: 새 줄 토큰을 사용할 수 있음) 토큰이 필요합니다. 간단한 언어를 토큰으로 사용하여 동적 토큰을 지원할 수 있습니다.

endToken

문자열

시작/엔드 토큰 쌍을 사용하는 경우 tokenizer로 사용할 종료 토큰입니다. 간단한 언어를 토큰으로 사용하여 동적 토큰을 지원할 수 있습니다.

inheritNamespaceTagName

문자열

XML을 사용할 때 루트/parent 태그 이름에서 네임스페이스를 상속하려면 간단한 언어를 태그 이름으로 사용하여 동적 이름을 지원할 수 있습니다.

headerName

문자열

메시지 본문을 사용하는 대신 토큰화할 헤더의 이름입니다.

regex

부울

토큰이 정규식 패턴인 경우 기본값은 false입니다.

xml

부울

입력이 XML 메시지인지 여부입니다. XML 페이로드로 작업하는 경우 이 옵션을 true로 설정해야 합니다.

includeTokens

부울

쌍을 사용할 때 부분에 토큰을 포함할지 여부입니다. 기본값은 false입니다.

group

문자열

예를 들어, n 부분을 그룹화하려면 큰 파일을 1000 줄의 청크로 분할합니다. 간단한 언어를 그룹으로 사용하여 동적 그룹 크기를 지원할 수 있습니다.

groupDelimiter

문자열

그룹화할 때 사용할 구분 기호를 설정합니다. 이 값을 설정하지 않으면 토큰은 구분 기호로 사용됩니다.

skipFirst

부울

첫 번째 요소를 건너뜁니다.

trim

부울

선행 공백 및 후행 공백 및 줄 바꿈을 제거하는 값을 트리밍할지 여부입니다.