[AI 서비스 개발] 데이터 연결, ETL(데이터 추출, 변환,적재)

1. ETL이란?

- Extract, Transform, Load

- 데이터를 한 곳에서 다른 곳으로 옮기는 과정(데이터 연결)

1) 추출(Extract): 여러 출처(DB, 파일, 웹서비스 등)로부터 필요한 데이터를 가져온다

2) 변환(Transform): 추출한 데이터를 분석하고, 필요한 형태(텍스트 → 벡터, 임베딩)로 변환한다.

3) 적재(load): 데이터베이스나 데이터웨어하우스에 저장, 벡터를 저장/관리/검색할 수 있는 기능 제공