Big Data는 무엇인가? 많은 데이터를 의미하는 건데 데이터는 데이터의 개념이 생긴 이후로 꾸준히 증가해 왔다. 데이터가 증가하는 방향으로 흐르는 것은 당연한건데 왜 갑자기 사람들이 Big Data Big Data하는가? 스토리지 기술의 발전과 구글의 등장과 함께 data의 value를 고급화했는지 모르겠다. 혹자는 데이터를 21세기의 원유라고 한다. 원유를 석유로 가공해야 진정한 가치를 가질 수 있다. 데이타를 가공할 기술이 이제 일반인들에게 전해진 것이 아닌가 한다. 아무도 Big Data에 대한 의미를 구체적으로 아는 사람이 없는것 같다.
데이터의 양이 증가하면서 크게 비정형 데이터와 비정형 데이터로 구분한다. 분석하기 위한 데이터로 형식을 갖춘 데이터와 데이터이지만 비가공의 데이터로 나누어 진다. 이런 비정형의 데이터를 가공하기 위해서는 엑셀에서는 다룰 수 없는 많은 양의 데이터를 처리할 수 있어야 하는데 그게 코끼리 Hadoop이다. Hadoop에 대해서는 조금더 알아볼 필요가 있다.
Big Data자체가 크게 의미를 가진 목적이 아니다. Big Data는 Smart Society에 진입하기 위한 하나의 주춧돌이다. 사람이 Smart하기 위해서는 실시간으로 무작위의 데이터를 예측해서 연속적으로 공급해야 하는데 그것을 하기 위한 소스가 Big Data가 되는 것이다.
양자역학 발견과 더불어 사회는 불확실성의 시대가 도래했다.
빅데이터를 활용한 기술기획 방법론.pdf
댓글