LG CNS 자세히보기

Oracle 4

빅데이터를 친구로 만드는 첫 걸음, 바라보는 관점 바꾸기 ②

지난 글에서 짚어본 문제점에 대한 해결책으로 HBase 기반의 Big Table System을 제시했는데요. 지금부터는 그 처방과 효과에 대해 살펴보겠습니다. 조치된 빅데이터 처방 Redis와 HBase로 구성된 Data Caching System으로 Read 집중 문제를 해결하고 HBase만으로 구성된 Big Table로 Write 집중 문제를 해결합니다. ORACLE을 대치하지 않고 NoSQL과 RDBMS 각각의 장점을 융합한 Hybrid 구조입니다. Big Table은 구현되지 않았기 때문에 본 글에서 이야기 하지 않겠습니다. l Fig. 1 개선 후 아키텍처 ① 데이터의 특성 시스템의 데이터는 공통 정보와 사용자 개인화 정보 그리고 개인화 이력 정보로 나눌 수 있습니다. 공통 정보는 Master ..

빅데이터를 친구로 만드는 첫 걸음, 바라보는 관점 바꾸기 ①

인터넷 서비스가 고도화됨에 따라 사용자가 생성하는 정보의 저장과 처리가 필요하고, 이를 위한 Big Cache System이 요구되고 있습니다. DB의 장애와 증설 비용을 고민하던 800만 사용자를 가진 B2C 서비스 시스템에 Open Source Software인 Redis와 HBase기반의 Cache System을 구축하여, 목표한 수준으로 CPU 사용률을 낮출 수 있었죠. 알파고와 빅데이터 알파고와 이세돌의 바둑 대결은 현재를 살아가는 사람들에게 많은 충격을 주었고, 새로운 세상에 대한 상상력을 자극했습니다. 이러한 알파고의 뒤에는 Deep Learning이란 기술이 숨어있고, 그 뒤로는 분산 병렬 컴퓨팅이라는 든든한 형님이 버티고 있는데요. 무려 1,202개의 CPU와 176 개의 GPU로 동시에..

금융 정보계에 HIA 도입의 필요성, Why?

금융 정보계는 전사에서 발생하는 모든 업무 데이터를 통합하여 통합 분석 View를 제공하고, 이를 기반으로 다양한 사용자 계층별로 분석 목적에 맞는 데이터를 제공하는 역할을 수행하고 있는데요. 빅데이터(Bigdata) 환경이 도래함에 따라 데이터의 양이 폭발적으로 증가하고, 데이터의 유형도 RDBMS(Relational Data Base Management System) 중심의 정형 데이터뿐만 아니라 각종 로그 데이터, 음성 데이터 등 비정형 데이터까지 분석할 필요가 생겼습니다. l 금융 정보계의 발전 방향 기술적으로는 오픈 소스 기반의 Hadoop 기술들이 성숙되어감에 따라 오픈 소스라는 불안감을 불식시키고 전사에서 활용 가능한 수준으로 발전하고 있어, 기존 정보계가 가지고 있는 한계(고가의 시스템, ..

IBC(국제방송장비전시회) 2014, 방송 미디어 트렌드를 이야기하다!

매년 개최되는 'IBC(국제방송장비전시회)'에 2년만에 다시 참석하게 되었습니다. IBC(International Broadcasting Convention)는 방송과 관련된 유럽 최대 규모일 뿐만 아니라, 세계 3대 글로벌 행사 중 하나이기도 한데요. 이번 행사는 9월 11일부터 16일까지, 네덜란드의 수도 암스테르담에서 진행되었습니다. < IBC(국제방송장비전시회)가 열린 암스테르담 RAI 전경> IBC에는 방송 및 동영상 제작에 필요한 장비, 이를 편집하고 전송하는 솔루션, 소비자의 화면까지 전달하는 셋톱박스까지, 미디어와 관련된 모든 장비와 솔루션이 전시되는데요. 따라서 방송 업계의 주요 기술과 흐름에 대한 파악이 가능하다고 볼 수 있습니다. 그러면 지금부터 필자가 행사에 직접 참가하여 느낀, 미..

IT Life 2014.09.17