Data Lake, Data Warhouse, Data Mart

2025. 2. 28. 23:31·데이터엔지니어링
728x90
반응형

Data Lake

  • 원시 데이터 및 비정형 데이터 (구조화, 반구조화, 비정형)
  • 실시간 분석이나 ML에 활용
  • 검색 및 처리가 비교적 어려움
  • ex - SNS의 게시물, 댓글, 좋아요, 영상 데이터 등

Data Warhouse

  • 여러 부서의 데이터를 통합하여 저장
  • 데이터를 구조화된 형식으로 저장
  • 주기적 업데이트 (실시간 처리보다 배치 처리 방식)

Data Mart

  • 금융, 마케팅 또는 영업 부서와 같은 특정 사업부의 요구 사항을 지원하는 data warehouse
  • data warehouse 보다 작은 규모로 운영
  • 빠르게 접근하여 분석 가능
  • 구조화된 데이터 사용
저작자표시 (새창열림)

'데이터엔지니어링' 카테고리의 다른 글

[Elasticsearch] 동의어 처리하기  (0) 2025.03.04
'데이터엔지니어링' 카테고리의 다른 글
  • [Elasticsearch] 동의어 처리하기
swwho
swwho
일상을 데이터화하다
  • swwho
    하루한장
    swwho
  • 전체
    오늘
    어제
    • 분류 전체보기 (188)
      • ML_DL (39)
        • MUJAKJUNG (무작정 시리즈) (18)
        • 딥러닝 공부하기 (21)
      • 데이터사이언스 (1)
        • EDA (1)
        • 데이터과학을 위한 통계 (0)
      • 데이터엔지니어링 (2)
      • 논문리뷰 (2)
        • Computer Vision (2)
      • Python 활용하기 (12)
      • 코딩테스트 (127)
        • Python (109)
        • MySQL (14)
      • Git (3)
      • MySQL 활용하기 (0)
      • 일상 이야기 (1)
  • 블로그 메뉴

    • 홈
    • 태그
  • 최근 글

  • 250x250
  • hELLO· Designed By정상우.v4.10.3
swwho
Data Lake, Data Warhouse, Data Mart
상단으로

티스토리툴바