아파치 임팔라

2. 특징

아파치 임팔라는 아파치 하둡에서 실행되는 쿼리 엔진이다. 이 프로젝트는 2012년 10월에 공개 베타 테스트 배포판으로 발표되었으며^[14][15] 2013년 5월 정식판으로 이용이 가능하게 되었다.^[16]

임팔라는 하둡에 스케일링 가능한 병렬 데이터베이스 기술을 도입함으로써 데이터 이동이나 전송 과정 없이 사용자들이 낮은 레이턴시의 SQL 쿼리를 HDFS과 아파치 HBase에 저장된 데이터에 발행할 수 있게 한다. 임팔라는 동일한 파일과 데이터 포맷, 메타데이터, 보안 및 자원 관리 프레임워크(맵리듀스, 아파치 하이브, 아파치 피그 및 기타 하둡 소프트웨어)를 사용하기 위해 하둡과 연동된다.

임팔라는 분석가와 데이터 과학자가 SQL 또는 비즈니스 인텔리전스 도구를 통해 하둡에 저장된 데이터에 대한 분석을 수행할 수 있도록 홍보된다. 그 결과, 대규모 데이터 처리(MapReduce를 통해)와 대화형 쿼리를 동일한 시스템에서 동일한 데이터 및 메타데이터를 사용하여 수행할 수 있게 되어, 분석을 수행하기 위해 데이터 세트를 특수 시스템 및/또는 독점 형식으로 마이그레이션할 필요가 없다.

'''하둡 통합'''

아파치 임팔라는 아파치 하둡 기반의 쿼리 엔진이다. 2012년 10월에 퍼블릭 베타 테스트 배포판으로 발표되었으며^[14][15] 2013년 5월 정식판으로 이용이 가능하게 되었다.^[16]

임팔라는 데이터 이동이나 전송 과정 없이 사용자들이 낮은 레이턴시의 SQL 쿼리를 HDFS과 아파치 HBase에 저장된 데이터에 발행할 수 있게 한다. 임팔라는 맵리듀스, 아파치 하이브, 아파치 피그 및 기타 하둡 소프트웨어에서 사용되는 것과 동일한 파일 및 데이터 형식, 메타데이터, 보안 및 리소스 관리 프레임워크를 사용한다.

임팔라는 HDFS, S3, ABFS, 아파치 HBase 및 아파치 Kudu 스토리지를 지원한다.^[9][10] 텍스트, LZO, SequenceFile, Avro, RCFile, Parquet 및 ORC를 포함한 하둡 파일 형식을 읽는다.^[6]

임팔라는 하둡 보안(Kerberos 인증, Ldap)을 지원하며, 아파치 Sentry 및 아파치 ranger를 사용한 세분화된 역할 기반 권한 부여 기능을 제공한다. 또한 아파치 Hive의 메타데이터, ODBC 드라이버 및 SQL 구문을 사용한다.

'''SQL 지원'''

아파치 임팔라는 ANSI SQL 표준을 준수하는 쿼리 언어를 제공한다.^[14][15][16] ODBC, JDBC 드라이버를 통해 다양한 비즈니스 인텔리전스(BI) 도구와 연동할 수 있다. 임팔라는 아파치 하이브의 메타데이터, ODBC 드라이버 및 SQL 구문을 사용한다.^[10] 사용자는 데이터 이동이나 전송 과정 없이 SQL 쿼리를 HDFS과 아파치 HBase에 저장된 데이터에 발행할 수 있다.

'''성능'''

아파치 임팔라는 아파치 하둡 기반의 쿼리 엔진으로, 분산 쿼리 실행, 컬럼 기반 스토리지 (Parquet 등), LLVM 기반 코드 생성 등을 통해 빠른 쿼리 성능을 제공한다.^[14][15] 낮은 지연 시간(Low Latency)으로 대화형 분석이 가능하다. 2013년 초, 열 지향 파일 형식인 Parquet이 발표되었다.^[6] 임팔라는 HDFS, S3, ABFS, 아파치 HBase 및 아파치 Kudu 스토리지를 지원하며, 텍스트, LZO, SequenceFile, Avro, RCFile, Parquet 및 ORC를 포함한 하둡 파일 형식을 읽을 수 있다.

'''보안'''

아파치 임팔라는 하둡 보안 (Kerberos 인증, LDAP)을 지원한다.^{[14][15][3][4]} 아파치 Sentry 및 아파치 ranger를 사용한 세분화된 역할 기반 권한 부여를 제공한다.^[9][10]

기능은 다음과 같다.

• HDFS, S3, ABFS, 아파치 HBase 및 아파치 Kudu 스토리지를 지원한다.
• 텍스트, LZO, SequenceFile, Avro, RCFile, Parquet 및 ORC를 포함한 하둡 파일 형식을 읽는다.
• 하둡 보안(Kerberos 인증, Ldap)을 지원한다.
• 아파치 Sentry 및 아파치 ranger를 사용한 세분화된 역할 기반 권한 부여.
• 아파치 Hive의 메타데이터, ODBC 드라이버 및 SQL 구문을 사용한다.

2. 1. 하둡 통합

2. 2. SQL 지원

2. 3. 성능

2. 4. 보안