본문 바로가기

Qlik

증분 적재

증분된 데이터를 로드하려면 Qlik 스크립트에서 일반적으로 "Where" 절을 사용합니다. 이를 통해 새로운 데이터만을 선택하여 로드할 수 있습니다. 또한, "Store" 명령어를 사용하여 이전 로드된 데이터와 새로운 데이터를 조인하여 최종 데이터 세트를 생성할 수 있습니다.

증분된 데이터를 로드하는 기본적인 방법은 다음과 같습니다.

  1. 처음에는 전체 데이터를 로드합니다.
  2. 이후, 새로운 데이터만 로드하기 위해 "Where" 절을 사용하여 데이터를 필터링합니다. 이 때, 필터링 기준은 이전에 로드된 데이터의 최신 날짜나 ID 등이 될 수 있습니다.
  3. 새로운 데이터를 이전 데이터와 조인하여 최종 데이터 세트를 생성합니다.

Where절에서 이전 데이터와 비교 할떄 Exists(Key)를 사용하면 빠르게 처리 할 수 있습니다.

Exists의 파라미터는 Key값이어야 하고 이전 로드된 데이터에 포함된 컬럼이어야 합니다.

 

'Qlik' 카테고리의 다른 글

Qlik binary load  (0) 2023.04.06
DB사용자 동기화  (0) 2023.04.06
큰 데이터 세트에서 Group By 속도 향상  (0) 2023.04.06
Qlik 커뮤니티 및 리소스  (0) 2023.04.06
Qlik Sense Desktop  (0) 2023.04.06