hudiCluster 테이블 함수

hudi 테이블 함수의 확장 기능입니다. 지정된 클러스터의 여러 노드에서 Amazon S3의 Apache Hudi 테이블 파일을 병렬로 처리할 수 있습니다.

이 함수는 hudi 테이블 함수의 확장 기능입니다.

지정된 클러스터의 여러 노드에서 Amazon S3의 Apache Hudi 테이블 파일을 병렬로 처리할 수 있습니다. initiator 노드에서는 클러스터의 모든 노드와 연결을 설정하고 각 파일을 동적으로 분배합니다. 워커 노드는 initiator 노드에 다음으로 처리할 작업을 요청해 처리합니다. 이 과정은 모든 작업이 완료될 때까지 반복됩니다.

​

구문

hudiCluster(cluster_name, url [,aws_access_key_id, aws_secret_access_key] [,format] [,structure] [,compression] [,extra_credentials])

​

인수

Argument	Description
cluster_name	원격 서버와 로컬 서버의 주소 집합 및 연결 매개변수를 구성하는 데 사용되는 클러스터 이름입니다.
url	S3에 있는 기존 Hudi 테이블의 경로가 포함된 버킷 url입니다.
aws_access_key_id, aws_secret_access_key	AWS 계정 사용자의 장기 자격 증명입니다. 이를 사용하여 요청을 인증할 수 있습니다. 이 매개변수는 선택 사항입니다. 자격 증명을 지정하지 않으면 ClickHouse 구성에 있는 자격 증명이 사용됩니다. 자세한 내용은 Using S3 for Data Storage를 참조하십시오.
format	파일의 포맷입니다.
structure	table 구조입니다. 포맷은 'column1_name column1_type, column2_name column2_type, ...'입니다.
compression	매개변수는 선택 사항입니다. 지원되는 값은 none, gzip/gz, brotli/br, xz/LZMA, zstd/zst입니다. 기본적으로 압축은 파일 확장자를 기준으로 자동 감지됩니다.
extra_credentials	매개변수는 선택 사항입니다. ClickHouse Cloud에서 역할 기반 접근을 위한 role_arn을 전달하는 데 사용됩니다. 구성 단계는 Secure S3를 참조하십시오.

​

반환 값

S3의 지정된 Hudi 테이블에서 지정된 클러스터의 데이터를 읽기 위한, 지정된 구조(structure)의 테이블(table)입니다.

​

가상 컬럼

• _path — 파일 경로. 유형: LowCardinality(String).
• _file — 파일 이름. 유형: LowCardinality(String).
• _size — 파일 크기(바이트). 유형: Nullable(UInt64). 파일 크기를 알 수 없으면 값은 NULL입니다.
• _time — 파일의 마지막 수정 시각. 유형: Nullable(DateTime). 시각을 알 수 없으면 값은 NULL입니다.
• _etag — 파일의 etag. 유형: LowCardinality(String). etag를 알 수 없으면 값은 NULL입니다.

​

관련 항목

• Hudi 엔진
• Hudi 테이블 함수