대한민국에서 Programmer로 살아가기

Act는 Oracle로 치면 Sql_plus같은 프로그램이다.

 ACM에 접속하기위해서는 QUEEN NODE가 가동되어 있어야 한다.

       ACM에 접속하기위해서는 QUEEN NODE가 가동되어 있어야 한다.

Aster Express 실습 - 필요사항 

범위 : 실습을 위한 Aster Cluster Multi Node Server 이미지 설치

          ACT 사용법

          Eclipse 내에 ADE(Aster Development Environment)구축

          Aster Data SQL client

          Aster 분석 라이브러리 설치

          SQL-MR실습(Aster 내장 분석 MapReduce 함수 실행)

          사용자의 정의 MapReduce 함수 작성, 배포, 실행

 필요 소프트웨어 : vmplayer, 7zip, winscp, putty, 이클립스 64bit ,jdk 64bit

                        aster express 이미지 다운로드 URL

                        http://www.asterdata.com/download_aster_express/

                        ADE 다운로드 URL

                        http://www.asterdata.com/download_development_environment/

 하드웨어 요구사항 : 64-bit capable CPU

                           메모리 4Gb이상

                           하드 20 Gb 이상

참고 tutorial 사이트

http://www.asterdata.com/download_aster_express/tutorial.php

 TeraData Aster

TeraData Aster는 빅 데이터 분석 언어인 MapReduce와 전통적인 DB처리 언어인 SQL을 결합한 것이 특징이다.

기존의 SQL을 통해 빅 데이터를 분석할 수 있다는 것이다.

Aster Data는 In-Database MapReduce라는 개념으로 불리며 SQL 질의에서 MapReduce 함수를 사용하는 방식이다. TeraData Aster는 대규모 병렬 처리 (MPP) 아키텍처 위에서 설계되었다.
 embed MapReduce 분석 엔진은 최적화된 자원을 최대한 활용하여 빠른 분석결과를 제공한다.

TeraData Aster는 고급분석기능의 함수를 MapReduce로 구현 삽입
고급 분석 개발자의 능력을 MapReduce의 분석 함수로 대체하여 쉽게 Big DataSet에서 분석결과를 초고속 결과를 제공 한다.

TeraData Aster 제품군

Aster Database

  대규모 병렬 처리 (MPP) 아키텍처위에 설계된 RDBMS

Aster SQL- MapReduce(사용자의 정의 MapReduce 함수)

  HDFS대신 RDBMS를 사용함.

Aster MapReduce 분석 포트폴리오(내장 분석 함수)

  Aster Database(RDBMS)를 대상으로 하는 Aster에서 제공하는 분석함수

Aster SQL-H

  HDFS에서 비정형화된 데이터를 HCatalog 를 통해 정형화된 데이터로

  제공해서 SQL- MapReduce를 사용할 수 있게 변화하는 역할

SQL-MapReduce

 Aster Data 데이터베이스 내에서  SQL-MapReduce로 알려진 MapReduce 프레임워크 이다.

 매우 효율적으로 분석 및 Aster 데이터베이스에서 병렬 방식으로 처리, 쓰기를 할 수 있다

 신속하게 작성 테스트, 그리고 Aster DataBase에  SQL-MapReduce 기능을 배포 할 수 있다.