RDBMS 개발자가 빅데이터를 대하는 자세
Big data 와 RDBMS 는 어떠한 관계인가 ?
빅데이터와 RDBMS와의 관계는 동일한 관계도, 대결하는 관계도 아니다.
상호보완적인 관계이다.
대규모 데이터는 어떻게 활용하면 좋은가 ?
대규모 데이터로
- 원인을 찾고
- 현상을 이해하고
- 미래를 예측하는데 활용을 해야 한다.
일부 데이터의 문제가 발생되어도
사람과 시스템이 해성하는 결과에 크게 달라지지 않는 "큰 수의 법칙"이 적용.
대규모 데이터 처리 중 일부데이터의 중복 혹은 유실이 발생이 될때,
분석결과에 큰 영향이 없다면 소기의 목적을 달성 후 데이터 정합성을 지키기 위한 후속 조치를 하면 된다
큰 그림을 생각하자.
업무/프로젝트에 대한 파악과 목적성, 정체성 등이 정말로 중요하다고 느낀다.
대규모 데이터는 일반 db와는 다른 관점에서 볼 필요가 있다고 생각이 되었다.
좀 더 큰 그림을 그리면서 필요한것을 찾아내는 역활,
세세한 부분은 일반db를 통해서 정합성을 맞추는 일에 집중을 하면 된다고 생각이 됐다.
반응형
'사이드 프로젝트 > 빅데이터 파일럿 프로젝트' 카테고리의 다른 글
빅데이터 파일럿 구성을 위한 작업 셋팅 - 1 (0) | 2022.02.10 |
---|