빅데이터전문가 하는일 [공부과정]

 

 

 

 

오늘날의 모든 데이터를 저장해놓은 저장소(서버)를 우리는 데이터베이스라합니다.

 

빅데이터라하면 큰 데이터 라고 생각하면 간단하지만 , 빅데이터라는 분야는

 

데이터베이스안에 저장된 모든 데이터를 분석 및 통계 , 데이터수집을 하는게

대표적인 업무입니다.

 

더 쉽게 이야기하자면 데이터를 저장해놓는 저장소인 데이터베이스 안에는

우리들의 개인정보 등 수없이 다양한 데이터들이 저장되어있다.

 

데이터베이스를 관리하는 직업

그리고 데이터베이스안에 저장된 모든 데이터를 분석하고 통계내는 직업이

바로 빅데이터전문가라 합니다.

 

 

 

 

 

1980~2000년 전으로 태어난 친구들의 경우에는 동네 슈퍼에 방문해서

물건을 사게되면 어르신들이 다이어리같은 책자에 판매한 물건과 금액을

수기로 작성하면서 기록을 남겼다 , 우린 이걸 가게부라고 이야기를했다.

 

오늘날에는 동네슈퍼 , 커피숍 , 식당 모두 어떠한 곳에서든

바코드를 입력하면 기록되는 포스기라는 전산프로그램이 도입되었으며

하루에 판매되는 물건들이 기록되고 , 하루 매출 , 3일동안의 매출

일주일동안의 매출 까지 모두 파악이 가능하다.

 

기업에서 가장 필요로한 인재가 된 빅데이터전문가

고객들이 원하는 취향 , 트렌드 , 습관 등 모든것들을 분석 , 통계를 내어

커피숍이라면 많이찾는 커피가 무엇인지 , 취향을 파악하고

그에맞는 커피를 개발한다는 개념이라고보면된다.

 

커피숍만 예를 들었지만 전세계 모든기업에서 필요로한 기술이다.

 

 

 

 

 

우리가 통신사에 방문해서 제가 한달에 몇시간 몇분 몇초에 통화량과

문자는 몇통하는지 , 데이터는 얼마나 쓰는지 요금이 평균 얼마나오나요 ?

 

라고 물어본다면 , 본인의 이름을 물어보게될것이다. 그렇다면 그에대한 답변을

하나같이 다해주게된다. 네. 고개님은 몇시간 몇분 몇초 통화와 , 문자는 몇통하시고

데이터는 몇기가 정도 사용하시니 , 요금제는 이게 적정하실거같으신데요 ?

 

바로 이런것들이 빅데이터기반의 프로그램이 모두 분석하고있기때문이다.

 

병원을 방문하면 처음 하는이야기 , 방문하신적있으신가요 ?

 

네 라고한다면 우리가 언제 어떠한 진료와 약을 처방받았는지 모두알수있다.

 

이런것들을 모두 분석하고 통계내는 전문가가 바로

빅데이터전문가다.

 

 

 

 

 

몇주전에는 자동차 보험을 가입하는데 신기한 부분을 감지하게되었습니다.

 

해당하는 보험사이트에 접속하여 이름 3글자를 입력하니

본인의 운전습관부터 , 자동차를 운행하는 평균시간과 키로수 까지 모두 분석되어

적절한 상품을 안내해주게됩니다.

 

이처럼 가장 먼저 시행되는 분야는 전세계 기업이지만

은행권 , 금융권 등 모두 IT융합이라는 말이 나오는 이유이기도합니다.

 

 

 

 

 

빅데이터가 하는 분석 , 통계 , 자료수집을 하는 프로그램은

 

R프로그래밍 , 하둡프로그래밍

 

두가지로 구성이 되어있다.

 

하둡프로그래밍 : 분석기술 , 분산되어있는 모든 데이터를 한곳으로 모아

분석을 할수있다.

 

R프로그래밍 : 통계프로그램 데이터들을 통계내며 그래픽으로도 나타나게 할수있으며

윈도우 , 리눅스 , 맥 등 모든 운영체제에서 사용이 가능하다.

 

하지만 하둡과 R프로그래밍의 경우

 

사용되는 프로그래밍 언어는 자바기반이며 구축된 서버는 리눅스이다.

또 , 여러대의 모든 데이터들을 한곳으로 모아 분석 , 통계를 내기위해선

네트워크의 지식도 필요로하다.

 

정리해서 말하자면 자바 - 리눅스 - 네트워크기초

이 3가지의 공부가 필요로하며 이 3가지 지식이 있어야만

 

R프로그래밍과 하둡프로그래밍을 배울수가있다.

 

 

 

 

 

빅데이터전문가는 개발자와 분석가 둘로 나뉘어지게되며

 

본인상황이 학생인지 , 취업준비생인지 비전공자인지

IT융합을 목적으로 배우려고하는지

 

목적과 방향에 따라 공부를 해야하는 과정과 자격증

모두 다른 부분이기때문에 이부분을 먼저

정확히 알아보시는게 중요합니다.