Tag Archive: Hadoop

Hadoop을 이용한 LOG 데이타관리

1. 몇 일전 MONITORGO를 이야기했습니다. MONITORGO와 연관된 구체적인 방안으로 NFA의 규정을 소개한 적이 있었습니다. 미국 NFA Rule2-48와 한국감독기관의 공문 하루 단위로 거래와 관련된 로그를 제출하라는 내용입니다. 이를 KRX에 적용하면 최초 주문을 접수(발생)하는 서버의 로그, 미니원장의 로그 및 회원사의 FEP의 로그를 제출한다는 내용입니다. 제출받은 로그를 모으면 어마어마하겠죠. 자료를 무작정 쌓아놓는다고 데이타가 정보가 되지 않습니다. 가공을 하여야 하고 분석을 하여야 합니다. 요즘…
Read more

시카고선물거래소의 Hadoop 이용사례

1. 어느 날부터 자본시장과 관련한 뉴스들이 Hadoop을 다룹니다. NoSQL이라는 말도 우연히 들었지만 Hadoop는 진짜로 모르겠더군요. 사실 더 깊숙히 파고들어갈 시간도 없습니다. 당장 제가 먹고살 식량이 아니기때문입니다. 또 시간이 흐릅니다. 어떤 블로그를 보니 CME를 다루고 있습니다. 주제는 Hadoop입니다. Big Data시대 데이타, 특히 마켓데이타의 관리는 관심사이기때문에 재미있게 살폈습니다. 2010년 Hadoop기반의 마켓데이타서비스를 준비할 때의 상황입니다. CME Group has data dating back to 1982…
Read more