저자: Zen과 컴퓨터 프로그래밍 기술
Apache Zeppelin(이하 Zeppelin)은 원래 UC Berkeley University의 연구원들이 개발하여 2013년 10월 1일에 공식적으로 공개한 오픈 소스 프로젝트입니다. 이 프로젝트는 데이터 과학, 대화형 데이터 분석 및 시각화를 위한 오픈 소스 도구인 Scala 언어로 구현됩니다. 고유한 기능에는 강력한 SQL 쿼리 인터페이스, 여러 프로그래밍 언어(예: Java, Python, R 등) 지원 및 사용자에게 결과를 유연하게 표시하는 기능이 포함됩니다. 또한 데이터 세트의 고급 분석을 지원하고 내장 함수, 통계 차트 라이브러리 및 기계 학습 알고리즘의 풍부한 라이브러리를 제공합니다.
Zeppelin은 중국에서 광범위한 응용 분야를 보유하고 있습니다. 오늘날 기업의 데이터 분석에서 Zeppelin은 데이터 분석 효율성을 개선하고 데이터 품질을 개선하며 비즈니스 요구를 충족할 수 있기 때문에 중요한 도구입니다. 또한, Zeppelin은 특히 빠르게 생성, 공유, 분석 및 탐색해야 하는 환경에서 비기술 인력도 쉽게 사용할 수 있는 간단하고 사용하기 쉬운 인터페이스를 가지고 있기 때문에 많은 개발자들의 관심을 끌었습니다. 데이터. 따라서 Zeppelin은 데이터 분석 분야에서 중추적인 위치를 차지하고 있습니다.
2. 기본 개념 및 용어 설명
2.1 데이터 웨어하우스
데이터 웨어하우스(Data Warehouse, DW)는 방대한 데이터를 저장, 구성 및 분석하는 데 사용되는 시스템입니다. 주로 주제 중심의 복잡하고 다양한 보고 및 의사결정에 사용되며, 마케팅, 영업, 인사관리, 의사결정 지원 등 다양한 응용 시나리오를 지원하는 데 사용됩니다.
데이터 웨어하우스는 원본 데이터 계층, 데이터 마트 계층 및 데이터 레이크 영역(또는 차원 모델링 계층)의 세 계층으로 나뉩니다. 그 중 소스 데이터 레이어는 일반적으로 로그 파일, 트랜잭션 레코드, 데이터베이스 테이블, 이메일, 웹 페이지 클릭 스트림, 모바일 애플리케이션 데이터 등과 같은 다양한 소스를 포함하는 원시 데이터를 포함하고 데이터 마트 레이어는 일반적으로 팩트 테이블과 차원을 사용합니다. 테이블 데이터 구성의 목적은 데이터를 보다 효율적으로 검색하고 분석하는 것입니다.