Enjoy what you do!

SAP HANA는 RDBMS 이지만 인메모리 그리고 컬럼기반으로 저장하고 압축 저장해서 처리 속도가 빨라 빅데이터 처리에 쓸수 있다고 한다.그러나 하둡처럼 비정형 데이터는 저장못함. (컬럼 만들고 거기다 비정형 저장해도 된다는데 이런말은 누가 못하나) SAP HANA는 컬럼 기반 DB라서 빠르다. 각각 컬럼 별로 따로따로 저장한다.-> 컬럼 10개 조회해야되면 기존 RDBMS는 컬럼 모두(100개) 조회해야 하지만(레코드 조회해야되니) 컬럼 기반은 딱 그 10개만 조회하면 돼서 빠르다.-> 사실 컬럼 기반도 되고 로우 기반도 된다. 둘 다 지원. 그러면 한 레코드에서 한 컬럼 값만 수정해야하는 경우는? -> 비효율적이다.그래서 델타라는 영역으로 나눠놨다. HANA는 메인영역과 델타 영역으로 나뉘는데 메인..

빅 데이터는 기존 데이터베이스 혹은 도구를 통해 처리하기 어려운 정도로 크고 복잡한 데이터 집합 - 위키피디아 빅 데이터 = high volume + high velocity + high variety + Value (Gartner) -> 3v에서 value추가되어 4v됨 빅 데이터 트렌드의 변화 #1데이터 저장의 요구사항 충족 -> 데이터 내 인사이트 발굴수집/저장 중심 분석/활용 중심(spark)Hadoop 시스템 인 메모리 솔루션 빅 데이터 트렌드의 변화#2전통적인 구축 방법론 -> Agile 방법론(Quick Win)순차적인 접근 방식 중요 use case 중심1~2년 구축 기간 3~4개월 단위로 진화 빅 데이터 트렌드의 변화#3 빅 데이터 자체만 관심 -> 빅 데이터 프로세스에 결합소셜/비정형 ..