Cloud/Azure
Azure Data Factory - Datasets
1. Connection 정보를 통해 연결된 DB에서 데이터를 읽어오거나 Azure에 저장하기 위한 정보를 관리 2. DataSet의 저장 포멧 종류 1) Azure : Storage Account, Azure Database 등 다양한 Connection을 제공 A. Azure Storage Account I. Blob, Data Lake Gen1~2, File Storage, Table Storage 등 다양한 지원을 제공 II. 생성 가) Blob과 Data Lake Gen2는 같은 Blob 형태 이나 계층 구조에 저장방식이 다르기 때문에 다른 Connector를 제공한다. 나) Connector를 선택 후 저장될 파일의 Format을 결정 다) 연결 정보 입력 후 생성 III. Parquet : ..
최근댓글