본문 바로가기
사이드 프로젝트/빅데이터 파일럿 프로젝트

RDBMS 개발자가 빅데이터를 대하는 자세

by 인디코더 2022. 2. 8.

RDBMS 개발자가 빅데이터를 대하는 자세

Big data 와 RDBMS 는 어떠한 관계인가 ?

빅데이터와 RDBMS와의 관계는 동일한 관계도, 대결하는 관계도 아니다. 
상호보완적인 관계이다. 

대규모 데이터는 어떻게 활용하면 좋은가 ?

대규모 데이터로 
- 원인을 찾고
- 현상을 이해하고 
- 미래를 예측하는데 활용을 해야 한다. 

일부 데이터의 문제가 발생되어도 
사람과 시스템이 해성하는 결과에 크게 달라지지 않는 "큰 수의 법칙"이 적용.

대규모 데이터 처리 중 일부데이터의 중복 혹은 유실이 발생이 될때, 
분석결과에 큰 영향이 없다면 소기의 목적을 달성 후 데이터 정합성을 지키기 위한 후속 조치를 하면 된다

 


큰 그림을 생각하자.
업무/프로젝트에 대한 파악과 목적성, 정체성 등이 정말로 중요하다고 느낀다. 
대규모 데이터는 일반 db와는 다른 관점에서 볼 필요가 있다고 생각이 되었다. 
좀 더 큰 그림을 그리면서 필요한것을 찾아내는 역활, 
세세한 부분은 일반db를 통해서 정합성을 맞추는 일에 집중을 하면 된다고 생각이 됐다. 

반응형