안녕하세요
IT전문교육기관에서 근무중인 교육팀장입니다.
아무리 인터넷에 찾아봤자 학원홍보가 대부분이고 수강생의 후기는 직접 학원에 오셔서
보실수가 있고 어느학원이 어떻게 잘가르친다도 중요하지만 뚜렷한 공부계획과
빅데이터쪽에 대해서 어떤 일을 하는지가 더 중요합니다.
일단 빅데이터 전문가가 하는일과 어떤 공부를 하는지에 대해서 말씀드리겠습니다.
실시간 쏟아지는 수많은 정보와 데이터들을 어디에 활용하고 기획하는지에서 부터 시작합니다.
예를 들어 모바일 쇼핑몰을 운영한다면 모든 연령층 20대 30대 40대 60대까지 찾는 키워드가
무엇이고, 어느 사이트에서 얼마나 있는지, 실제 구매하는 데는 가격과 상품 평가 중 어떤 요인이
영향을 미치는지에 대해 사전에 분석해 보는 전문가를 뜻합니다.
보통 빅데이터전문가가 하는일은
수집 -> 정제 -> 분석 이순서로 공부를 하게 됩니다.
수집같은경우는 여러 곳에서 모인 데이터들을 취합하는 과정입니다 이 과정에서 사용되는 도구가
R프로그래밍과, 파이썬 입니다.
정제 같은경우는 시간이 가장 오래걸리는 작업인데요. 한글파일이든 PDF파일이든 텍스트 파일이든
이렇게 난잡하고 각기 다르게 모인 데이터들을 포맷도 제각각 해야하고요 이런 부분들을
정제해서 따로 모아놓는 작업입니다. 이과정에서 쓰이는 도구들 역시 R,파이썬이구요
분석같은경우는 시각화하는 작업입니다. 정제된 데이터들을 어떤부분은 표를 쓸것인지
그림을 쓸것인지 차트를 쓸것인지에 대한 부분들을 시각화하는작업입니다
여기서 쓰이는 도구는 R,하둡,파이썬 이구요.
근데 보통 정말 제대로된 빅데이터전문가가 되려면 R프로그래밍의 한계점을 이해하고 하둡을
잘 다룰줄 알아야합니다.
R프로그래밍을 이용해 통계분석을 하는데 대용량 데이터에는 알맞지 않습니다.
하둡을 활용해 대용량 데이터, 수집, 분석, 플랫폼을 사용하는데
하둡클러스터를 구성해서 리눅스 환경에서 구현이 되기에 리눅스지식이 필요하구요 또한 클러스터라는게 네트워크 환경에서 요구 되기 때문에 네트워크 공부도 하셔야 합니다.
그리고 DB 데이터베이스 같은경우도 SQL 을 배워야 하는 부분이구요.
그리고 하둡이나 R프로그래밍은 자바를 기반으로 하기에 기본적인 프로그래밍 언어도 공부하셔야하구요.
그렇기 때문에 총체적으로 무엇을 배우셔야 하냐면
기본적인 프로그래밍,네트워크,운영체제에 대해서 이해가 필요합니다.
그래서 C언어,자료구조,자바,JSP,파이썬,R프로그래밍,하둡 이렇게 공부하셔야 합니다.
근데 구체적으로 어떻게 공부방법과 순서를 정해야 할지 정확히 하셔야 하고 이런 세세한 부분들에
대해서 어떻게 공부해야할지 모르는게 실상입니다.
이런부분들에 대해서 자세한 도움을 원하시면 1:1 상담 도움드리겠습니다.
https://open.kakao.com/o/sIQvmT4
