728x90

분석 10

비전공자의 데이터 분석 도전기 시작합니다. (18.9.2~

안녕하세요. 소신있는 삶을 꿈꾸는 BL(Belief Life)입니다. 직장인 5년차인 요즘 "과연 내가 어떻게 일을 접근하는 스타일인가?" 혹은 "어떤 방식으로 일하는 것을 즐겨하는가?"를 생각해 왔습니다. 분명 사람마다 다르겠지만, 현재까지 느낀 바로는 "많은 Data를 가지고 분류를 하면서 경향 분석을 하여 관리하는 스타일"이라는 것입니다. 그래서 이와 가장 관련이 있는 분야를 생각해 보니 "데이터 분석 전문가"라는 분야를 알게 되었습니다. 과거에는 데이터 분석이 중요했지만 지금만큼 중요하지 않았습니다. 빅데이터가 중요해지는 이유는 말그대로 사진, 동영상등 다양한 데이터가 엄청난 속도로 증가 해지고 이것을 잘 다루냐가 국가/기업의 성공을 좌지우지 하기 때문입니다.이런 이유로, 2018.8.31 문재인..

빅데이터 분석 대표 프로그램 (하둡 & R)

안녕하세요. 아프락사쓰입니다. 빅데이터 분석할 때 대표적으로 사용되는 하둡 과 R프로그램에 대해 알아 보도록 하겠습니다. (다음 내용들은 위키백과에서 발췌했습니다.) 1. 아파치 하둡 (Apache HaDoop, High-Availability Distributed Object-Oriented Platform) 아파치 하둡은 대량의 자료를 처리할 수 있는 큰 컴퓨터 클러스터에서 동작하는 분산 응용 프로그램을 지원하는 프리웨어 자바 소프트웨어 프레임워크이다. 원래 너치의 분산 처리를 지원하기 위해 개발된 것으로, 아파치 루씬의 하부 프로젝트이다. 분산처리 시스템인 구글 파일 시스템을 대체할 수 있는 하둡 분산 파일 시스템(HDFS : Hadoop Distributed File System)과 맵리듀스를 구..

빅데이터 분석도구에는 무엇이 있을까??

안녕하세요. 아프락사쓰입니다. 이번 포스팅에서는 빅데이터 분석도구에 대해 알아 보도록 하겠습니다. 1. 빅데이터 분석도구 개요 현대는 수많은 데이터들의 사회이다. 매년 홍수처럼 불어나는 정보들 때문에 그 상당한 양을 다루는 기술의 필요성이 대두되고 있다. 빅데이터의 특징 중 하나인 가치를 창출해 내기 위해서는 대용량 데이터와 다양한 데이터를 핸들링하고 이를 분석 할 수 있는 통계적 방법이 필요하고, 이러한 통계적 방법을 뒷받침 할 수 있는 통계 분석 툴이 필수적으로 요구된다. 기초적인 분석 도구로는 엑셀이 있고, 중급 통계 분석용으로는 SPSS, 전문가들이 주로 사용하는 SAS 등이 일반적으로 널리 사용되고 있다. 2.1 엑셀의 개요 엑셀은 마이크로소프트사에서 개발한 윈도 환경의 스프레드시트 프로그램으로..

빅데이터의 비정형 데이터마이닝이란??

안녕하세요. 아프락사쓰입니다. 소셜 미디어에서 얻는 데이터는 대부분이 비정형 데이터마이닝이기에, 언급되고 있는 빅데이터 분석은 주로 비정형 데이터를 분석해야 합니다. 이번 포스팅에서는 비정형 데이터의 정의 등에 대해 알아보도록 하겠습니다. 1. 비정형 데이터 비정형 데이터란 글자 그대로 정형화 되지 않은 데이터로서, 구체적으로 미리 정의된 데이터 모델을 가지고 있지 않은 데이터를 말한다. 대표적인 비정형 데이터의 예로는 아주 많은 양의 데이터를 가지고 있으면서 구조와 형태가 다르고 정형화 되지 않는 문서, 영상, 음석 등을 들 수 있다. 문서의 경우만 살펴봐도 텍스트가 대부분이나 그 속에는 다른 그림이나 표 등이 들어 있어서 구분하기 힘들게 하는 불규칙성이 있는 의미를 파악하기 애매하기 때문에 기존의 일..

빅데이터 분석의 첫단계!! (기획이란??)

안녕하세요. 아프락사쓰입니다. 빅데이터 분석은 상상을 초월하는 데이터 정보 속에서 필요한 자료를 추출하여 의사결정에 도움을 주는 도구입니다. 이런 데이터 정보 속에서, 무엇을 할지? 또는 왜 하는지?가 없다면 원하는 자료를 얻는데 어려움을 겪을 것입니다. 이번 포스팅에서는 빅데이터 분석의 첫단계인 기획에 대해 알아보도록 하겠습니다 기획이란 무엇을, 왜 해야 하는지를 명확히 하는 것이다. 비슷한 개념으로 계획이 있다. [기획력]의 저자 다코 가가야쿠는 일반적인 경영활동에서 '계획이란 주어진 문제와 관련된 다수의 요소를 논리적으로 사고하여, 불확실한 요소를 미리 예측해서 과학적인 해결책을 세우는 것'이라고 정의하고 있다. 이러한 틀 속에서는 기획과 계획 사이에 공통된 부분이 있기는 하지만 다코 가가야쿠는 양..

의료 분야에서 빅데이터 활용은??

안녕하세요. 아프락사쓰입니다. 이번 포스팅에서는 의료 분야에서는 빅데이터를 어떻게 사용하는지 알아보도록 하겠습니다. 1. 인간을 건강하게 만드는 빅데이터 전 세게적으로 글로벌화, 양극화, 고령화라는 메가트렌드가 경험되고 있으며, 특히 고령화 사회진입으로 인한 대응책 마련이 필요한 상황이다. OECD는 2050년 대부분 국가의 3명 중 1명이 65세 이상이 될 것이라 예측했다. 우리나라 고령화 인구는 현재 전체 인구의 10% 수준에서 2020년 20% 이상으로 두 배나 증가할 것으로 전망된다. 인간의 건강에 대한 관심은 더욱 높아지고 개인건강기록부 기반의 건강관리 비즈니스가 부상하면서, 유전자 정보를 개방하는 추세가 나타나고 있다. 여기에 의료 데이터와 보험 등 기업 데이터 등이 융합된 빅데이터 처리 기술..

빅데이터 분석 프로세스란?? (경영 빅데이터 분석사 공부 中)

안녕하세요. 아프락사쓰입니다. 빅데이터의 분석이란 어떤 프로세스를 가지고 있을까요? 저와 같은 비전공자에게는 빅데이터 분석이라고하면 너무 막연하기만 합니다. 저와 같은 분들을 위하여 포스팅하였습니다. 1. 분석 프로세스의 이해 분석은 새로운 개념이 아니며 이미 오래전부터 여러 영역에서 효과적으로 활용해왔다. 일반적으로 분석은 단계적으로 진행된다. 예를 들어, 매우 분석적인 마케팅 조사의 경우 조사 목적 도출, 조사 설계, 모집단 및 표본 설계, 데이터 수집, 데이터 분석, 결과 제시 등의 단계로 진행된다. 또한 결함 발생 수를 100만 개당 3~4개 이하로 줄이고자 하는 식스 시그마 역시 매우 체계적인 과정으로서 두 가지 분석방법이 있다. 이 중 DMAIC방법론이 가장 일반적인 방법론인데, 이는 문제정의..

빅데이터 분석에 필요한 역량이란?? (경영 빅데이터 분석사 공부 中)

안녕하세요. 아프락사쓰입니다. 지번 포스팅에서 빅데이터의 분석의 개념과 중요성에 대해서 알아 보았습니다. 과연 빅데이터의 분석 능력을 향상시키기 위해서는 어떤 역량이 필요할까요? 1. 분석 능력 앞으로 빅데이터 시대가 성숙하면 할수록 분석 능력을 갖춘 사람들에 대한 수요는 더욱 증가할 것이다. 빅데이터에 관한 맥킨지 보고서에 따르면 미국에서 분석 능력을 갖춘 사람들이 2018년까지 150만명 정도 부족할 것으로 예상되고 있다. 이런 현상은 우리나라에서도 발생될 것으로 예측 되는데, 한국 정보화 진흥원에 의하면 2013~2017년까지 빅데이터 전문분야에서 52만개의 일자리가 창출 될 것이다. 이와 같이 데이터 분석 전문 인력 수요가 증대되고 있는 빅데이터 시대에 조직 구성원들에게 요구되는 역량은 구성원 각..

빅데이터의 분석이란?? (경영 빅데이터 분석사 공부 中)

안녕하세요 아프락사쓰입니다. 엄청난 데이터가 있지만, 그속에서 가치있는 데이터를 뽑아내지 못하면 과연 그 데이터의 가치는 좋을까요? 이런 이유로, 빅데이터의 가장 중요한 부분은 분석이라고 생각 되어집니다. 이번 포스팅에서는 "빅데이터의 분석이란"에 대해 알아 보는 시간을 가지도록 하겠습니다. "경영 빅데이터 분석사" 를 공부하던 중, 해당 내용이 도움이 될것 같아서 분석에 대한 내용을 교재에서 발췌하였습니다. 1. 분석의 중요성 방대한 양의 데이터가 쏟아져 나오면서 빅데이터가 최대 화두가 되었다. 빅데이터는 대량의 테이터를 포함하여 다양한 유형의 데이터와 실시간성 데이터를 표함하는 의미이다. 그러나 더 정확한 의미로는 데이터 그 자체 뿐 아니라 데이터에 대한 분석을 포함하고 있다. 즉 빅데이터의 부상은 ..

빅데이터 어디서부터 공부해야하나? 자격증!! (데이터 분석 전문가 ADP)

안녕하세요. 아프락사쓰입니다. 데이터 분석 준전문가(ADsP)에 이어 데이터 분석 전문가(ADP)에 대해 알아보도록 하겠습니다. ADP는 ADsP와 다르게 합격률이 엄청나게 낮고 합격하기 어려운 것으로 소문이 자자합니다. 추후에 도전할 ADP에 대해 같이 알아보도록 하겠습니다. 1. 데이터 분석 전문가 정의 데이터 분석 전문가란 데이터 이해 및 처리 기술에 대한 기본지식을 바탕으로 데이터 분석 기획, 데이터 분석, 데이터 시각화 업무를 수행하고 이를 통해 프로세스 혁신 및 마케팅 전략 결정 등의 과학적 의사결정을 지원하는 직무를 수행하는 전문가를 말한다. 2. 데이터 분석 자격검정의 필요성 오늘날 데이터 처리 및 분석을 통한 데이터 활용은 생산성 향상, 고부가가치 및 고용 창출 등 국가 경제적 가치 창출..

반응형