IT용어위키



데이터 파이프라인

데이터의 흐름, 그 흐름 과정에서 이루어지는 전방위적 처리과정을 수행하는 시스템, 또는 매커니즘

1. 특징

  • 병렬 처리
  • 대규모 및 실시간
  • 자동화

2. 수행 기능

  • 추출(extracting)
  • 변경(transforming)
  • 결합(combining)
  • 검증(validating)
  • 적재(loading)

3. ETL과의 차이

  • 데이터 파이프라인은 ETL을 서브셋으로 포함하는 광범위한 용어

  출처: 공대위키(공대위키에서 최신 문서 보기)
  * 본 페이지는 공대위키에서 미러링된 페이지입니다. 일부 오류나 표현의 누락이 있을 수 있습니다. 원본 문서는 공대위키에서 확인하세요!