다음을 통해 공유


pipelines 명령 그룹

Note

이 정보는 Databricks CLI 버전 0.205 이상에 적용됩니다. Databricks CLI는 공개 미리 보기로 제공됩니다.

Databricks CLI 사용은 Databricks 라이선스Databricks 개인 정보 보호 고지, 그리고 모든 사용 데이터 관련 조항의 적용을 받습니다.

pipelines Databricks CLI 내의 명령 그룹을 사용하면 파이프라인에 대한 세부 정보를 만들고, 편집하고, 삭제하고, 시작하고, 볼 수 있습니다. Lakeflow Spark 선언적 파이프라인을 참조하세요.

Databricks 파이프라인 생성

요청된 구성에 따라 새 데이터 처리 파이프라인을 만듭니다. 성공하면 이 명령은 새 파이프라인의 ID를 반환합니다.

databricks pipelines create [flags]

Arguments

None

Options

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

Databricks 파이프라인 삭제

파이프라인을 삭제합니다.

databricks pipelines delete PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    삭제할 파이프라인입니다.

Options

전역 플래그

databricks 파이프라인 가져오기

파이프라인을 가져옵니다.

databricks pipelines get PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    가져오기 위한 파이프라인.

Options

전역 플래그

databricks 파이프라인 get-update

활성 파이프라인에서 업데이트를 가져옵니다.

databricks pipelines get-update PIPELINE_ID UPDATE_ID [flags]

Arguments

PIPELINE_ID

    파이프라인의 ID입니다.

UPDATE_ID

    업데이트의 ID입니다.

Options

전역 플래그

databricks 파이프라인 list-pipeline-events

파이프라인에 대한 이벤트 정보를 불러옵니다.

databricks pipelines list-pipeline-events PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    이벤트를 검색할 파이프라인입니다.

Options

--filter string

    SQL과 유사한 구문을 사용하여 표현된 결과의 하위 집합을 선택하는 조건입니다.

--max-results int

    단일 페이지에서 반환할 최대 항목 수입니다.

--page-token string

    이전 호출에서 반환된 페이지 토큰입니다.

전역 플래그

databricks 파이프라인 list-pipelines

Delta Live Tables 시스템에 정의된 파이프라인을 나열합니다.

databricks pipelines list-pipelines [flags]

Arguments

None

Options

--filter string

    지정된 조건에 따라 결과의 하위 집합을 선택합니다.

--max-results int

    단일 페이지에서 반환할 최대 항목 수입니다.

--page-token string

    이전 호출에서 반환된 페이지 토큰입니다.

전역 플래그

databricks 파이프라인 목록 업데이트

활성 파이프라인에 대한 업데이트를 나열합니다.

databricks pipelines list-updates PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    업데이트를 반환할 파이프라인입니다.

Options

--max-results int

    단일 페이지에서 반환할 최대 항목 수입니다.

--page-token string

    이전 호출에서 반환된 페이지 토큰입니다.

--until-update-id string

    있는 경우, 이 update_id를 포함하여 그때까지 업데이트를 반환합니다.

전역 플래그

databricks 파이프라인 시작 업데이트

파이프라인에 대한 새 업데이트를 시작합니다. 파이프라인에 대한 활성 업데이트가 이미 있는 경우 요청이 실패하고 활성 업데이트가 계속 실행됩니다.

databricks pipelines start-update PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    업데이트를 시작할 파이프라인입니다.

Options

--cause StartUpdateCause

    지원되는 옵션: [API_CALL, JOB_TASK, RETRY_ON_FAILURE, SCHEMA_CHANGE, SERVICE_UPGRADE, USER_ACTION]

--full-refresh

    true이면 이 업데이트는 실행하기 전에 모든 테이블을 다시 설정합니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

--validate-only

    true인 경우 이 업데이트는 파이프라인 소스 코드의 정확성만 확인하지만 데이터 세트를 구체화하거나 게시하지는 않습니다.

전역 플래그

databricks 파이프라인 중지

활성 업데이트를 취소하여 파이프라인을 중지합니다. 파이프라인에 활성 업데이트가 없는 경우 이 요청은 아무 작업도 수행하지 않습니다.

databricks pipelines stop PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    중지할 파이프라인입니다.

Options

--no-wait

    IDLE 상태에 도달하기 위해 기다리지 마세요.

--timeout duration

    IDLE 상태에 도달하는 최대 시간(기본값 20m0s)

전역 플래그

databricks 파이프라인 업데이트

제공된 구성으로 파이프라인을 업데이트합니다.

databricks pipelines update PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    이 파이프라인의 고유 식별자입니다.

Options

--allow-duplicate-names

    false이면 이름이 변경되고 다른 파이프라인의 이름과 충돌하는 경우 배포가 실패합니다.

--budget-policy-id string

    이 파이프라인의 예산 정책입니다.

--catalog string

    이 파이프라인에서 데이터를 게시하기 위한 Unity 카탈로그의 일환인 카탈로그입니다.

--channel string

    사용할 버전을 지정하는 Lakeflow Spark 선언적 파이프라인 릴리스 채널입니다.

--continuous

    파이프라인이 지속적인지 또는 트리거되는지 여부입니다.

--development

    파이프라인이 개발 모드인지 여부입니다.

--edition string

    파이프라인 제품 버전입니다.

--expected-last-modified int

    있는 경우 편집하기 전에 파이프라인 설정의 마지막으로 수정된 시간입니다.

--id string

    이 파이프라인의 고유 식별자입니다.

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

--name string

    이 파이프라인에 대한 사용자 친화적인 식별자입니다.

--photon

    이 파이프라인에 Photon을 사용할 수 있는지 여부입니다.

--pipeline-id string

    이 파이프라인의 고유 식별자입니다.

--schema string

    테이블을 읽거나 게시하는 기본 스키마(데이터베이스)입니다.

--serverless

    이 파이프라인에 대해 서버리스 컴퓨팅을 사용할 수 있는지 여부입니다.

--storage string

    검사점 및 테이블을 저장하기 위한 DBFS 루트 디렉터리입니다.

--target string

    이 파이프라인의 테이블을 추가할 대상 스키마(데이터베이스)입니다.

전역 플래그

databricks 파이프라인 get-permission-levels

파이프라인 사용 권한 수준을 가져옵니다.

databricks pipelines get-permission-levels PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    사용 권한을 얻거나 관리할 파이프라인입니다.

Options

전역 플래그

databricks 파이프라인 권한 확인

파이프라인의 사용 권한을 가져옵니다. 파이프라인은 루트 개체에서 사용 권한을 상속할 수 있습니다.

databricks pipelines get-permissions PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    사용 권한을 얻거나 관리할 파이프라인입니다.

Options

전역 플래그

databricks 파이프라인 권한 설정

파이프라인 사용 권한을 설정합니다.

개체에 대한 사용 권한을 설정하여 기존 사용 권한이 있는 경우 대체합니다. 지정되지 않은 경우 모든 직접 권한을 삭제합니다. 개체는 루트 개체에서 사용 권한을 상속할 수 있습니다.

databricks pipelines set-permissions PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    사용 권한을 얻거나 관리할 파이프라인입니다.

Options

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

databricks 파이프라인 업데이트 권한

파이프라인에 대한 권한을 업데이트합니다. 파이프라인은 루트 개체에서 사용 권한을 상속할 수 있습니다.

databricks pipelines update-permissions PIPELINE_ID [flags]

Arguments

PIPELINE_ID

    사용 권한을 얻거나 관리할 파이프라인입니다.

Options

--json JSON

    요청 본문은 인라인 JSON 문자열이거나 JSON 파일에 @path을 포함한 것입니다.

전역 플래그

전역 표시기

--debug

  디버그 로깅을 사용할지 여부입니다.

-h 또는 --help

    Databricks CLI 또는 관련 명령 그룹 또는 관련 명령에 대한 도움말을 표시합니다.

--log-file 문자열

    출력 로그를 쓸 파일을 나타내는 문자열입니다. 이 플래그가 지정되지 않으면 출력 로그는 기본적으로 stderr에 기록됩니다.

--log-format 포맷

    로그 형식 형식 text 또는 json. 기본값은 text입니다.

--log-level 문자열

    로그 형식 수준을 나타내는 문자열입니다. 지정하지 않으면 로그 형식 수준을 사용할 수 없습니다.

-o, --output 유형

    명령 출력 형식 text 또는 json. 기본값은 text입니다.

-p, --profile 문자열

    명령을 실행하는 데 사용할 파일의 프로필 ~/.databrickscfg 이름입니다. 이 플래그를 지정하지 않으면, 존재하는 경우 DEFAULT로 명명된 프로필이 사용됩니다.

--progress-format 포맷

    진행률 로그를 표시할 형식: default, append, inplace또는 json

-t, --target 문자열

    해당하는 경우 사용할 번들 대상