워크플로우 스튜디오에서 플로우 편집
플로우를 편집하여 페이지 매김이 올바르게 구현되었는지 확인합니다. 이렇게 하면 데이터가 올바르게 임포트되었는지 확인할 수 있습니다.
- 안 함
- 오프셋
- 시간 기반
- 토큰 기반
배치 임포트 없음
에 제공된 자동화 센터페이지 매김 방법을 사용하지 않으려면 배치 없음 임포트 방법을 선택합니다. 여기에는 단계가 필요하지 않습니다.
오프셋 기반 배치 임포트
특정 시작점(오프셋)과 배치 크기(제한)를 사용하여 데이터를 임포트하려면 오프셋 기반 일괄 임포트 방법(페이지 매김 방법)을 선택합니다.
- 오프셋: 데이터를 임포트하기 위한 시작점입니다.
- 총 항목: 임포트하려는 총 기록 수입니다.
- 제한: 각 배치에서 임포트할 기록 수입니다.
예를 들어, 오프셋을 20으로, 총 항목을 200으로, 제한을 10으로 설정하면 시스템은 기록 20부터 시작하여 200개의 기록이 모두 임포트될 때까지 10개 기록의 배치로 데이터를 임포트합니다.
구성 단계
- SourceHub 오프셋 기반 페이지 매김 청크 가져오기 작업에서 오프셋, 총 항목 및 제한 필드에 대한 값을 지정한 다음 완료를 선택합니다.
값을 정의하면 오른쪽 패널(각 패널 아래)에서 chunks_child0 필드를 사용할 수 있습니다.
작업 선택 단계에서 선택한 작업의 경우, SourceHub 오프셋 기반 페이지 매김 청크 가져오기 작업에서 생성된 chunks_child0 필드 출력을 사용하여 SourceHub에서 오프셋 기반 페이지 매김 청크 작업을 가져오는 제한과 오프셋 값을 매핑합니다.
제한 및 오프셋을 지원하지 않는 작업 처리
SourceHub 오프셋 기반 페이지 매김 청크 가져오기 작업에서 반환한 출력을 사용하여 작업의 제한 및 오프셋 값을 매핑합니다.
선택한 작업에 오프셋 기반 페이지 매김에 대해 미리 정의된 매개변수가 없지만 이러한 매개변수를 수용할 수 있는 필터가 포함된 경우 다음 중 하나를 수행할 수 있습니다.
- 옵션 1: 선택한 작업 바로 앞에 작업을 추가하여 제한 및 오프셋을 처리합니다. 이 작업은 기본 작업이 데이터를 가져오는 데 사용할 수 있는 쿼리를 생성해야 합니다.
- 옵션 2: 기본 작업을 복사하고, 제한 및 오프셋에 대한 입력을 포함하도록 수정하고, 이러한 입력을 처리하여 쿼리를 생성합니다. 이 쿼리를 원래 작업의 필터에 전달합니다.
주:옵션 2를 선택하는 경우 먼저 원래 작업의 복사본을 만들어야 합니다. 복사 후 작업 선택 단계에서 복사된 작업을 다시 선택하고 플로우를 재생성합니다. 작업 선택에 대한 자세한 내용은 다음 문서를 참조하십시오 작업 선택.- 완료 및 테스트를 선택합니다.
- 에서 3단계 이상 데이터에 대한 일괄 임포트 구성을 수행합니다.
시간 기반 일괄 임포트
특정 날짜 범위에 대한 데이터를 임포트하려면 시간 기반 배치 임포트 방법을 선택합니다.
구성 단계
- SourceHub 날짜 기반 페이지 매김 청크 가져오기 작업에서 시작 날짜와 종료 날짜를 지정한 다음 완료를 클릭합니다.
값을 정의한 후에는 오른쪽 패널의 범위 필드를 사용할 수 있습니다.
- 작업 선택 단계에서 선택한 작업의 경우, SourceHub 날짜 기반 페이지 매김 청크 가져오기 작업에서 생성된 범위 필드 출력을 사용하여 시작 날짜 및 종료 날짜 값을 매핑합니다.
날짜 형식
연결 관리자는 YYYY:MM:DD:HH:MM:SS 형식의 날짜를 사용하고 반환합니다. 작업이 날짜 범위를 지원하는 경우 형식이 자동으로 적용됩니다.
날짜 범위를 지원하지 않는 작업 처리
작업이 날짜 범위를 자동으로 지원하지는 않지만 사용자 지정 매개변수에 대한 필터를 포함하는 경우 다음 접근 방식 중 하나를 따를 수 있습니다.- 옵션 1: 선택한 작업 앞에 작업을 추가하여 시작 날짜와 종료 날짜를 처리합니다. 이 작업은 기본 작업이 데이터를 가져오는 데 사용할 수 있는 쿼리를 생성해야 합니다.
- 옵션 2: 기본 작업을 복사하고 시작 날짜 및 종료 날짜에 대한 입력을 포함하도록 수정합니다. 작업 내에서 이러한 입력을 처리하여 쿼리를 생성하고 원래 작업의 필터에 전달합니다.주:옵션 2를 선택하는 경우 먼저 원래 작업의 복사본을 만들어야 합니다. 복사 후 작업 선택 단계에서 복사된 작업을 다시 선택하고 플로우를 재생성합니다. 작업 선택에 대한 자세한 내용은 다음 문서를 참조하십시오 작업 선택.
- 완료 및 테스트를 선택합니다.
- 에서 3단계 이상 데이터에 대한 일괄 임포트 구성을 수행합니다.
토큰 기반 배치 임포트
연속 토큰을 사용하여 데이터를 임포트하려면 토큰 기반 배치 임포트 방법을 선택합니다.
배치 임포트 구성 페이지에서 토큰 기반 배치 임포트 방법을 선택하는 경우 토큰의 이름을 제공해야 합니다. 이 토큰은 작업에서 반환되는 연속 값(예: next_url, next_token 또는 다음)을 나타냅니다. 토큰 이름이 맞춤법 및 대문자를 포함하여 작업에서 반환된 토큰 이름과 정확히 일치하는지 확인합니다.
구성 단계
- 제공된 토큰 이름이 올바르면 do-while 조건이 자동으로 매핑합니다. 공백으로 유지되면 작업 출력의 연속 토큰을 do-while 로직의 조건 필드로 수동으로 끕니다.
- 문자열 유형의 플로우 변수 를 추가하여 토큰의 업데이트된 값을 저장합니다.
- 변경 내용을 저장하고 완료를 클릭합니다.
- 선택한 작업 뒤에 플로우 변수 설정 논리 단계를 삽입합니다. 이 단계에서는 새로 생성된 플로우 변수의 값을 작업에서 반환된 연속 토큰으로 설정합니다. 이 토큰이 do-while 조건에 매핑된 토큰과 일치하는지 확인합니다.
- 완료 및 테스트를 선택합니다.
- 에서 3단계 이상 데이터에 대한 일괄 임포트 구성을 수행합니다.