빅 데이터와 데이터베이스의 차이점??

빅 데이터와 데이터베이스의 차이점??

작성일 2015.10.27댓글 2건
    게시물 수정 , 삭제는 로그인 필요

안녕하세요. Industrie4.0의 화두 중에 거론되는 빅데이터에 대한 문의입니다.

위키백과에 따르면
"빅 데이터(영어: big data)란 기존 데이터베이스 관리도구로 데이터를 수집, 저장, 관리, 분석할 수 있는 역량을 넘어서는 대량의 정형 또는 비정형 데이터 집합[1] 및 이러한 데이터로부터 가치를 추출하고 결과를 분석하는 기술[2] 을 의미한다"
라고 나와 있습니다.
 
결국 빅데이터는 지금의 데이터베이스에서 관리하는 양보다 더 많은 양의 데이터를 관리하는 기술을 뜻하는 것 같은데요..

빅데이터와 데이터베이스를 구분지을 수 있는지요?
데이터베이스 관리 능력을 넘어서는 데이터를 관리하는 데이터베이스가 빅데이터라는 게 이게 뭔 말인지...??

예를 들어 오바마가 선거에 빅데이터를 활용했다고 하는데 유권자들의 여러 성향까지 분석하여 선거작전을 만들었다고 합니다. 이건 데이터베이스에서 못하는 겁니까? 무슨 차이가 있는지 궁금합니다.

-------

개인적으로 Industrie4.0에 대해 느끼는 점은 IT업체들이 온갖 미사여구를 총동원하여 제조업 분야를 고객으로 삼는 것 같습니다. 뭐 하나 자동화를 하더라도 온갖 실패의 실패로 자리잡기까지 시간이 소요되는 마당에 이런 게 누적(?)되어 소요시간 최소화되고 CPS를 통해 시뮬레이션 결과가 한방에 나온다는 기술이론들이 마치 거의 다 가능케 한다는 것인 양... 인터넷 자료들의 포맷이 대부분 ppt인데 ppt는 광고목적으로 많이 활용되죠. 그런 정보에서 부작용, 유념할 사항은 잘 관찰되지 않더군요.
지금 현실이 다 뜬 구름 찬양 같은 분위기입니다. 제조업과 윈윈관계인 것임에는 부정 못하지만....

앞으로 인구절벽이다 뭐다 하는데 인더스트리4.0의 가치창출 돈 뭐 이런 것들 차트가 미래에 갈수록 하늘을 치솟고 있습니다. 사줄 사람이 사줘야 하늘을 치솟든 말든 할텐데 사줄 사람이 줄어드는 현실은 감안을 하고 싶지 않은 것 같습니다. ppt 만드는 입장에서...

다품종대량 생산이 인더스트리4.0의 특징인데 중소기업한테 인더스트리4.0이 어떤 장점을 줄 수 있느냐에 대한 답변이 고객의 수시로 변하는 요구에 빨리 대응 가능하다는 거래요.
거대자본을 통해서 인더스트리4.0으로 무장한 대기업은 고객의 요구에 상대적으로 느려터졌다는??

스마트폰케이스를 사출방식에서 메탈 쇠깍는 방식으로 바꿔져서 사출업체들이 도산되는 마당에
그런 거 인더스트리4.0이 해법이 될 수 있을까요? 스마트폰업체가 사출기계들과 해당회사 이익 다 책임져준대요? 중소기업이 뭐가 유리한지?? 그냥 또 대기업의 생산라인을 4.0에 맞춰 깔거나 대리생산하는 격의 순환으로 보입니다만...

IT업체들은 최첨단 제품도 아닌, 바나나 농장에서까지 온갖 IT이론들을 총동원하여 바나나 농장주인한테 수천억원을 삥 뜯으려는 점, 일단 일 벌여놓고 제대로 돌아갈지도 의문인 것이 지금 인더스트리4.0 자료들로부터 읽을 수 있는 느낌입니다. (과장하면...)


#빅 데이터와 기계 학습의 시대 심리학 연구 모형의 산정 원칙과 방법 #빅 데이터와 공공 데이터 활용

profile_image 익명 작성일 -

데이터베이스는 기존의 데이터베이스시스템으로 여러가지 데이터들을
정형화하여 필요한 경우에만 데이터를 사용토록 할수있습니다.
일단 시스템으로 데이터들을 관리를 하기 때문에
유지보수가 중요하고 유지보수비용도 만만치않는 반면

빅데이터는 정형화 비정형화된 데이터들을 클라우드기반 데이터웨어하우스에 
저장하게 되며 이러한 빅데이터처리는 하둡클러스터덕에 가능한 기술입니다.
그리고 비정형화된 데이터들을 가공하여 데이터를 사용하는것뿐만 아닌
활용을 하여 분석 예측까지 가능한것이죠

이제는 개개인마다 스마트폰을 사용하며 데이터들을 남기게 마련이죠
그리하여 마케팅이나 분석가, 더 나아가 의료기관 분야 외에도
더많은 분야에서도 빅데이터를 도입하고있습니다.

질문자님께서 이런 IT신기술에 대해 궁금해하는 이유는
뭔지 모르겠지만 개인적인 생각으로 정리를 나름해봤습니다.
혹여라도 직업을 갖기 위해 준비중이시거나 입시목적이라면
전문교육을 통해 기본적인 틀부터 준비하시는것은 어떨까 싶네요

더욱이 궁금하신부분이나 교육에 대해 상담이 필요하시다면
부담없이 질문주세요


 

profile_image 익명 작성일 -

 

 

세상에 대하여 우리가 더 잘 알아야 할 교양

강이든

내인생의책 2015.03.20.

“빅데이터는 새 시대를 열어 줄 신기술이므로

적극적으로 데이터를 활용할 제도를 구축해야 한다.”

vs

“빅데이터로 인한 개인 정보 유출 등의 빅브러더 문제를 막으려면

 데이터 활용을 적절히 규제해야 한다.”


 2014년 4월 16일, 우리에게는 일어나지 말았어야 할 일이 일어났습니다. 그리고 많은 이야기가 있었습니다. 그 중에는 세월호 참사와 같은 재난의 원인을 관리하고 그 예후를 탐지할 수 있는 시스템을 조속히 구축해야 한다는 주장도 있었지요. 이러한 주장 가운데에는 최첨단 신기술인 빅데이터만 잘 활용했더라도 세월호의 비극을 막을 수 있었을지 모른다는 안타까움의 목소리가 있습니다. 빅데이터만 활용할 수 있었더라도 최적의 구조 방법을 결정하고 적용하는 일이 훨씬 빨랐을 거라는 주장이죠.

  빅데이터는 엄청난 양의 디지털 데이터를 처리하고 가공할 수 있는 기술을 확보하면서 생겨난 개념입니다. 수많은 데이터를 정리한 자료들은 재난에 대비한다거나, 불치병을 고칠 실마리를 찾아낸다거나, 스포츠나 패션 사업에 활용하는 등 인류의 삶을 좀 더 풍요롭게 해줄 수 있지요. 그러나 이 신기술이 우리에게 이롭기만 할 것 같은데, 우려의 목소리도 좀처럼 잦아들지 않고 있습니다. 빅데이터 기술을 활성화하려면 어마어마한 양의 데이터가 필요한데, 이 과정에서 개인 정보에 대한 보안 문제나 사생활 침해, 인권 침해 문제가 필연적으로 발생할 수밖에 없기 때문이지요. CCTV에 찍힌 내 모습이나 개인의 통화내역 등의 개인 정보를 누군가 한데 모아 분석한다고 생각해 보세요. 사실 실제로 이런 일이 일어나고 있지 않다고 장담할 수 있는 사람이 아무도 없습니다. 정말 무섭지 않나요? 자, 그렇다면 우리는 최첨단 신기술인 빅데이터를 부수고 제한해야 할까요?


《세상에 대하여 우리가 더 잘 알아야 할 교양 ㊶ 빅데이터, 빅브러더가 아닐까?》는 다소 생소할 수 있는 빅데이터의 개념을 명쾌하게 설명해 줍니다. 특히 데이터의 생성 과정과 처리 방법 등을 설명하고 있어 새로운 기술에 대한 궁금증을 해결해 주지요. 또한 의료, 공공 분야, 교통, 스포츠, 패션 산업, 대통령 선거 등 현재 빅데이터가 활용되고 있는 다양한 분야의 사례를 자세히 설명함으로써 빅데이터 기술에 대한 이해를 돕는 것이 큰 덕목입니다.

 하지만 이 책에서 가장 주목해야 할 부분은 빅데이터 기술에 대한 균형 잡힌 접근법입니다. 앞에서 말한 것처럼 이 책은 빅데이터 기술의 발달이 일상적인 사생활 침해와 인권 침해를 가져올 수 있음에 대해서 경고합니다. 이제 인터넷 사이트에 개인정보를 입력하지 않았다고 해서 개인 정보가 보호받는 시대가 아닙니다. 빅데이터를 이용한 기업이나 정부는 우리의 일거수일투족을 사실상 알고 있다고 하면 과언일까요? 이 책의 내용을 따라가다 보면 신기술의 긍정적 효과는 물론이고, 그로 인해 파생되는 부정적 문제들에 대해서도 깊이 생각해 보게 한다는 장점이 있습니다. 이 책이 부디 더 많은 이들에게 빅데이터 기술에 대한 바른 이해의 계기가 되기를 바랄 뿐이고 신기술의 사회적 영향력에 대한 생각의 지평이 넓어질 수 있기를 바랍니다.


▶ 추천의 글

  

  이 책은 아직은 생소한 분야인 빅데이터의 개념을 명확히 알려주고, 빅데이터의 무궁무진한 활용 가능성을 소개해 청소년 독자의 이해를 돕는 점이 큰 장점입니다. 여러분도 이 책을 읽고 미래의 기술인 빅데이터를 어떻게 활용하면 좋을지, 그 한계를 어떻게 극복하는 것이 좋을지 함께 생각해 보았으면 합니다.


성균관대학교 인터랙션사이언스학과 교수 신동희


▶ 책 속에서


  그렇다면 빅데이터란 무엇일까요? 빅데이터는 ‘크다’의 빅(Big)과 ‘정보’의 데이터(Data)에서 나온 합성어입니다. 쉽게 말해 아주 큰 데이터, 즉 수많은 데이터의 거대한 모음이라고 할 수 있지요. 정보 통신 기술의 발달로 현대에는 과거보다 더 많고 다양한 데이터가 생겨나고 있습니다. 기존 데이터 처리 기술로는 감당할 수 없을 만큼 양이 많고 복잡한 데이터가 생겨났지요. 이처럼 과거와 달리 엄청나게 복잡하고 무수히 많은 데이터를 모아놓은 거대한 집합체를 가리켜 ‘빅데이터’라고 합니다.

- 16쪽, 빅데이터란 무엇일까요?


  데이터 분석에는 다양한 기법들이 이용됩니다. 분석 용도에 따라 통계, 데이터 마이닝, 텍스트 마이닝, SNS 분석 등의 기술을 이용하는데요. 데이터의 성격과 해결하려는 문제에 따라 다양한 방법의 분석 방법이 적용됩니다. 따라서 정확한 데이터 분석을 위해서는 해결하려는 문제를 명확히 정의해야만 합니다.

- 46쪽, 빅데이터, 어떻게 만들어질까?


  그러다 보니 패스트 패션 업체들의 빅데이터 사랑은 대단합니다. 패스트 패션 업체들은 전 세계에 퍼져 있는 판매점들의 데이터를 모으고 SNS를 이용해 트렌드를 읽어 내는 방법으로 전 세계 공급망을 관리하지요. 이 모든 과정은 거의 실시간으로 이루어집니다. 그 덕분에 패스트 패션 업체들은 남보다 빠르게 유행하는 패션 스타일을 파악하고 대응할 수 있습니다.

                  - 62쪽, 무궁무진한 빅데이터의 세계


  신기술은 양면성을 지니고 있습니다. 빅데이터 기술 역시 이를 피해 갈 수는 없지요. 새로운 기술이 현실에 어떤 영향을 미칠지 모르거니와 그 누구도 적용된 결과를 정확히 예견할 수 없기 때문입니다. 그래서 빅데이터 기술에는 낙관론과 비관론이 동시에 존재합니다.


- 82쪽, 빅데이터, 새로운 해답일까요?


  예측 시스템이 아무리 발전한대도 100퍼센트 정확한 예측을 실현할 수는 없습니다. 만약빅데이터 시스템을 이용해 90퍼센트 정확도로 테 러범을 골라낼 수 있다고 해봅시다. 이 기술로 90명의 테러리스트를 잡 을 수 있을지는 모르지요. 하지만 10명의 무고한 사람들이 범죄자 꼬리 표를 달고 상상할 수도 없는 고통 속에서 살아가게 됩니다.


- 105쪽, 빅데이터와 인권


  빅데이터를 통한 예측은 단지 분석 결과일 뿐입니다. 예측이란 것은 100퍼센트 정확하다고 말할 수 없어요. 수집된 데이터에 오류가 있을 수도 있고 누군가 의도적으로 결과를 조작할 수도 있어요. 따라서 모든 것을 빅데이터 분석에만 의존했다가는 큰 낭패를 겪을 수도 있습니다. 이러한 빅데이터의 허점을 메울 수 있는 것도 결국 우리들 사람입니다.


-117쪽, 빅데이터와 미래


▶ 차 례


글쓴이의 말 - 6

들어가며 : 새 시대를 여는 데이터의 물결 - 8


1. 빅데이터란 무엇일까요? - 13

2. 빅데이터, 어떻게 만들어질까? - 33

3. 무궁무진한 빅데이터의 세계 - 51

4. 빅데이터, 새로운 해답일까요? - 75

5. 빅데이터와 인권 - 91

6. 빅데이터와 미래 - 107


용어 설명 - 119

연표 - 122

더 알아보기 - 125

찾아보기 - 126


빅데이터와 데이터베이스의 차이점

빅데이터와 데이터베이스의 차이점이 궁금합니다. 반갑습니다 질문자님~ KG 에듀원 컨설턴트 입니다. 빅데이터와 데이터베이스의 차이점을 알고 싶으신...

빅데이터전문가의 차이점

... 그리고 빅데이터와 데이터베이스의 차이점에 대해서도 알려주세요 (제가 전문가가 아니니까 이해하기 쉽게 알려주셨으면 좋겠어요) 쉽게 설명을 해보자면 아버지가...

전문가와 데이터베이스관리자의 차이점

빅데이터 전문가와 데이터베이스관리자의 차이점이 뭔가요? 안녕하세요 학생분! 저는 IT 전문 교육 컨설턴트 쿤열쿤 입니다 빅데이터 전문가와 데이터베이스 관리자의...

빅데이터전문가의 차이점

... 올해 고1이된 여학생입니다 단도직입적으로 얘기하자면 데이터베이스관리자와 빅데이터전문가의 차이점은 무엇인가요? 인문계고등학교에 진학했는데 당연 이과이구요...

빅데이터와 데이터베이스의 차이점

빅데이터와 데이터베이스의 차이점 안녕하세요. IT 법인 전문교육기관 교육전문컨설턴트 입니다. 질문에 답변드리겠습니다. 데이터베이스빅데이터를 배우시면...