빅데이터는 많은 사람들에게 큰 의미가 있지만, 그 영향은 얼마나 넓습니까? 빅 데이터의 이러한 특성과 함께 넣어 마스터 상상해 보세요.
더 이상 유행어가 아닙니다.
큰 데이터, 네가 어떻게 정의하든지 간에, 모두 크게 칭찬받고 악의적으로 중상된다. (조지 버나드 쇼, 자기관리명언) 많은 사람들에게 많은 것을 의미합니다. 과학자와 소매점의 복지이자 대량의 프라이버시와 보안 위협에 대처할 수 있는 기술입니다.
구세주든 사기든, 심지어 둘의 결합이든, 빅데이터는 여전히 권위자, 예언자, 마케팅 담당자, 보안 애호가들의 화제다. 그것의 비공식 정의도 점차 진화하고 있다. 저게 뭐지? 위키피디아의 정의는 "모든 데이터 수집은 너무 크고 복잡해서 데이터 관리 도구나 전통적인 데이터 처리 소프트웨어를 사용하기가 어렵다" 는 좋은 출발을 했다.
그러나 데이터 공유 디바이스의 수가 기하급수적으로 증가함에 따라 다양한 고속 (클래식 3V 정의) 데이터 세트를 관리하는 데 어려움이 가중되고 있습니다. 이러한 장치는 일반적으로 IoT (Internet of Internet) 라고 하며, 기계 센서와 상호 연결 온도 조절기, 전구, 냉장고 및 웨어러블 건강 모니터를 포함합니다. IDC 는 IoT 시장이 향후 몇 년 동안 폭발적으로 성장하여 20 13 말 965438+ 억 설치 장비에서 2020 년 28 10 억으로 성장할 것으로 예상하고 있습니다.
빅데이터에 대한 유용한 통찰은 기업들이 더 많은 제품과 서비스를 판매할 수 있을 뿐만 아니라 건강 관리, 가짜 약의 범람 방지, 테러리스트 추적, 전화 기록 추적 등 많은 잠재적 혜택을 얻을 수 있도록 도와준다. 그래서 우리는 빅데이터 자체가 좋고 나쁨이 없다는 것을 알고 있다. 중요한 것은 네가 그것을 어떻게 사용하는가이다.
아이러니하게도, 인간의 경험을 향상시킬 수 있는 큰 데이터의 잠재력에 관계없이 귀중한 생각과 견해를 얻기 위해 데이터를 수집, 필터링, 분석 및 해석하는 것은 종종 어렵습니다. 이 슬라이드는 빅데이터가 직면한 도전과 대응 능력을 살펴보았다. 확실한 사실은 너를 놀라게 할 것이다. 우리는 어떤 기대를 해야 합니까? 네, Hadoop 이라는 선도적인 대형 데이터 플랫폼의 미래는 밝습니다. 데이터 과학자와 관련 빅 데이터 전문가는 앞으로 1 년 동안 고임금 일자리를 얻어야 한다.
업계 인사들은' 빅 데이터' 라는 유행어가 점차 사라질 것이라고 예언했다. Hortonworks 회장인 허버 쿠니츠 (Herb Cunitz) 는 20 12 년 2 월 한 블로그에 "결국 이 모든 것은 데이터로 귀결된다" 고 썼다. 빅 데이터와 이 공간에 대한 모든 예측이 무너질 것이며 분석가와 많은' 대형' 공급업체를 포함한 모든 관심 있는 사람들이' 데이터 관리' 로 이어질 것입니다.
쿠니츠는' 빅 데이터' 의 종말을 너무 일찍 예견했을지 모르지만, 그는 이 모든 것이 결국 데이터로 귀결될 것이라고 정확하게 지적했다. 관리 도구만 변경됩니다. 자, 우리 슬라이드를 깊이 연구하고, 전시된 통계 분석과 연구 보고서를 보십시오.
얼마나 많은 데이터가 무시되었습니까?
Forrester 의 최근 연구에 따르면 대부분의 기업들은 기존 데이터의 약 12% 를 분석한 것으로 예상하고 있습니다. 이게 좋냐 나쁘냐? 음, 이 회사들은 그들이 간과한 데이터의 88% 에 숨겨진 통찰력과 사고를 놓쳤을지도 모릅니다. 아마도 그들은 자원 고갈과 바닷물을 끓이려는 전략을 현명하게 피했을 것이다. Forrester 는 분석 도구의 부족과' 강제적인' 데이터 섬이 기업이 대부분의 데이터를 무시하는 두 가지 이유라고 생각하는데, 그 이유는 기업이 어떤 정보가 가치가 있는지, 어떤 정보가 가장 무시되는지 판단하기 어렵다는 간단한 사실도 포함하고 있다.
빅 데이터 폭발
미친 빅데이터는 일정한 기술을 가진 기술자에게 좋은 소식이다. Dice 에 따르면 기술 및 엔지니어링 전문가를 위한 웹 사이트의 데이터 전문가 수요가 급증하고 있습니다. 이 사이트의 4 월 보고서에 따르면 NoSQL 전문가의 직위 수는 전년보다 54% 증가했고' 빅데이터 인재' 의 직위 수는 46% 증가했다. 비슷한 Hadoop 과 Python 인재 일자리가 각각 43%, 16% 증가했다. 물론, 이것은 데이터 보안 전문가의 채용 공고에 비하면 아무것도 아니다. 인상적인 통계에 따르면 후자는 지난 한 해 동안 162% 상승했다.
빅데이터는 얼마나 큰가요?
디지털 세계의 매스는 단 6 년 만에 오늘날의 3.2ZB 에서 40zb 로 증가할 것이다 (1 Zb 는 대략1억테라바이트). Hortonworks CEO 인 Rob Bearden 은 캘리포니아 산호세에서 열린 Hadoop Summit 20 14 기조 연설에서 "우리 주변의 데이터 양이 폭발적으로 증가하고 있으며, 지금부터 2020 년까지 기업 데이터 양이 50 배 증가할 것" 이라고 말했다. 가장 중요한 것은 이 데이터의 85% 가 새로운 데이터 소스에서 나온 것이다. " 빌던은 모바일 장치, 소셜 미디어, 네트워크로 연결된 기계에 의해 생성된 데이터가 전 세계 기업들에게 도전이자 기회라고 말합니다.