Parametrization 매개변수화
ADF 파이프라인의 매개변수화
- 파라메터
- 변수
- 표현(json)
예시)
동적 input file
동적 output 테이블명
appeding date
conditional programming 등등
소스 csv 파일명이 그대로 데이터셋명으로
사전작업
azure database table 생성(소스 csv파일) 앞서 예제와 같이 일단 생성함....
(추가작업)
input Parameters 에서 fileName 추가
add dynamic content 에서 찾아서 클릭하면
아래와 같이 알아서 들어감.
@dataset().fileName
output Parameters 에서 동일하게 추가
마지막 Activity에서 수정
tableName에 value 추가 해줌 : Cars, Planes
===========================
반대로 azrue sql -> export csv to blob도 가능함
파일명에 datetime concat도 할수있음
그럼... 정리해보면. 온프레미스 source 쪽에는 계속해서 데이터가 쌓이고 있따면,
해당 파일들을 자동으로 파이프라인 통해서 azure sql로 쌓아나갈 수 있다.
=============================
set vaiables 두개의 액션 가운데, variables 추가
'기술(Azure 만...) > Azure빅데이터,분석' 카테고리의 다른 글
KepserverEX - Iot Edge - Iot Hub (0) | 2021.07.16 |
---|---|
DW, ADF, Synapse Analytics 복습 (0) | 2021.03.01 |
데이터분석 기초 (0) | 2020.09.09 |
ADF data mapping dataflow (0) | 2020.04.19 |
Azure datafactory (ADF) (0) | 2020.04.19 |