728x90

데이터 9

AI챗봇, 미래에는 데이터를 가진 사람이 승자

오늘은 AI 챗봇을 맛보는 날이다. 카카오톡, 고객센터 등 많은 부분이 AI챗봇으로 대체되었다. 하지만 간단한 것들만 대체되었고, 심도있는 대화는 아직도 상담원이 필요하다. AI 챗봇의 원리는 사용자가 질문 → 카카오톡 서버에서 로컬 PC 서버로 전송 → 개인 PC에서 Text로 Open AI에 질문 → Open ai에서 text로 답변 → 역순으로 사용자에게 답변이 간다. 만약 이미지가 필요하다면 DALL E라는 사이트를 사용할 수 있다. ChatGPT 뿐만 아니라 DALL E 또한 건당 사용료를 내야 한다. 이제 검색을 하면 돈을 내야 하는 시대가 오지 않을까? 만약 내가 나만의 AI를 보유하고 있다면, 나의 ai를 연결해줌으로써 돈을 벌 수 있는 시대가 올 것으로 보인다. 나의 ai를 만들려면, 충..

건설현장 사고업무에 대해는 태도

안전관리 업무 중 "사고"는 Impact가 큰 업무이다. 그 이유는 사고 업무 중에는 사람의 생사가 달려있기 때문이다. 사람의 생사가 달려있어서, 사고에서 발생한 시사점은 경영진에게 바로 전달이 될 수 있다. 그렇다면 사고에서 어떤 시사점을 뽑아 전파를 해야 할까? 만약 사고가 발생을 하면, 사고가 발생한 근본적인 원인 2~3가지를 선정하고, 효과성 위계에 따라 제거/대체/기술적/관리적/보호구 순으로 대책을 수립하고, 타 현장 횡전개 및 이행여부 모니터링을하여 효과적이다가 판단되면 지침에 반영하여 타사업부도 적용시킨다. 단계중 가장 중요한것은 사고조사이다. 사고조사 시 적정한 원인과 대책이 확인이 되어야 하는데, 사고조사자 역량 등으로 인해 수준차이가 크다. 조사자가는 핵심을 찾지 못하고 상황을 가지고 ..

비전공자의 데이터 분석 도전기 시작합니다. (18.9.2~

안녕하세요. 소신있는 삶을 꿈꾸는 BL(Belief Life)입니다. 직장인 5년차인 요즘 "과연 내가 어떻게 일을 접근하는 스타일인가?" 혹은 "어떤 방식으로 일하는 것을 즐겨하는가?"를 생각해 왔습니다. 분명 사람마다 다르겠지만, 현재까지 느낀 바로는 "많은 Data를 가지고 분류를 하면서 경향 분석을 하여 관리하는 스타일"이라는 것입니다. 그래서 이와 가장 관련이 있는 분야를 생각해 보니 "데이터 분석 전문가"라는 분야를 알게 되었습니다. 과거에는 데이터 분석이 중요했지만 지금만큼 중요하지 않았습니다. 빅데이터가 중요해지는 이유는 말그대로 사진, 동영상등 다양한 데이터가 엄청난 속도로 증가 해지고 이것을 잘 다루냐가 국가/기업의 성공을 좌지우지 하기 때문입니다.이런 이유로, 2018.8.31 문재인..

R 프로그래밍 공부방법에 회의감이 들면..

안녕하세요. 아프락사쓰입니다. 저는 빅데이터 분석 도구인 R을 이용하여 여러 데이터를 분석하여, 세상을 읽고 싶은 마음으로 공부를 시작하였습니다. 공부를 시작한지 얼마되지 않았지만, “R을 이용한 데이터 처리 & 분석 실무”란 교재를 가지고 공부를 하고 있는데 점차 회의감이 들기 시작했습니다. "내가 왜 이것을 공부하고 있는 걸일까?" "나는 정말 데이터 분석 하는 것을 좋아하는 것일까?" 만약 데이터 분석에 흥미가 있으면, 어떤 점에서 좋은 것일까? 공부가 잘 안되면 안될수록, 많은 의문들이 제 머릿속에서 튀어 나왔습니다. 현재까지 고민을 했을 때, 저는 순수하게 데이터 분석을 좋아해서 공부하는 건 아닌 것 같습니다. 처음에도 언급했듯이, 저는 특정 데이터를 받으면, 어떤 식으로 활용을 하는지? 즉, ..

빅데이터의 비정형 데이터마이닝이란??

안녕하세요. 아프락사쓰입니다. 소셜 미디어에서 얻는 데이터는 대부분이 비정형 데이터마이닝이기에, 언급되고 있는 빅데이터 분석은 주로 비정형 데이터를 분석해야 합니다. 이번 포스팅에서는 비정형 데이터의 정의 등에 대해 알아보도록 하겠습니다. 1. 비정형 데이터 비정형 데이터란 글자 그대로 정형화 되지 않은 데이터로서, 구체적으로 미리 정의된 데이터 모델을 가지고 있지 않은 데이터를 말한다. 대표적인 비정형 데이터의 예로는 아주 많은 양의 데이터를 가지고 있으면서 구조와 형태가 다르고 정형화 되지 않는 문서, 영상, 음석 등을 들 수 있다. 문서의 경우만 살펴봐도 텍스트가 대부분이나 그 속에는 다른 그림이나 표 등이 들어 있어서 구분하기 힘들게 하는 불규칙성이 있는 의미를 파악하기 애매하기 때문에 기존의 일..

빅데이터의 데이터마이닝이란??

안녕하세요. 아프락사쓰입니다. 이번 포스팅에서는 데이터마이닝에 대해 알아 보도록 하겠습니다. 1. 데이터마이닝 개념 데이터마이닝은 대용량의 데이터로부터 자동 또는 반자동적인 방법을 통하여 의미 있는 패턴, 규칙, 관계를 찾아내는 것이다. 데이터마이닝은 또한 많은 데이터베이스로부터 지금까지 잘 알려지지 않고 유용하며 활용이 가능한 정보를 추출하는 과정으로 정의가 되기도 한다. 기업이나 정부는 일반적인 업무 활동을 통해 대용량의 데이터를 축적해 왔다. 그러나 빈번하게 발생되는 많은 양의 데이터들은 수치화가 되지 않았을 뿐만 아니라, 수리적 형태보다는 질적인 형태로 저장이 되어 일반적인 통계 방법에 의해 잘 분석과 활용이 될 수 없었다. 이로 인해 그동안 데이터베이스에 포함되어 있는 많은 정보들이 제대로 활용..

빅데이터 분석을 위한 원천데이터를 얻을 수 있는 곳!!

안녕하세요. 아프락사쓰입니다. 빅데이터를 분석하기 위해서는 데이터가 필요한데, 저와 같은 일반인 특히 비전공자는 데이터를 어디서 얻을지 막막합니다. 이런 분들을 위하여, 공공데이터 및 지원을 받을 수 있는 정보를 공유하도록 하겠습니다. 1. 공공정보 활용 지원센터 최근 정부에서는 범정부차원에서 국가가 보유한 공공정보를 대외 개방하기 위한 노력의 일환으로 공공정보 개방 협의체를 발족하려는 움직임이 있다. 행정안전부를 비롯한 국토해양부, 기상청, 경찰청, 농촌진흥청, 특허청, 통계청, 법제처, 서울시, 경기도 등 민간 수요가 높은 공공정보 보유 기관들이 12년 6월 25일 '공공정보 개방 협의체'에 참여했으며 이들은 선언문을 통해 '스마트 시대를 맞아 국민생활의 편의를 증진하고 국가 경제의 새 성상 기회를 ..

산업분야의 빅데이터 활용은?? (경영 빅데이터 분석사 공부 中)

안녕하세요. 아프락사쓰입니다. 빅데이터는 정치, 사회, 의료, 물류등 많은 분야에서 유용하게 사용되어지고 있습니다. 이번 포스팅에서는 빅데이터는 과연 산업분야에서 어떤 방식으로 활용이 되고 있는지 알아 보도록 하겠습니다. 1. 빅데이터 애널리틱스 빅데이터라는 단어도 아직 적절한 번역이 없듯이 애널리틱스 역시 적당한 우리말이 없는 단어이다. 애널리틱스는 "기업이나 조직의 문제를 컴퓨터 기술, OR(Operational Research) 또는 통계학을 이용하여 문제를 해결하는 응용"이라고 정의하며 분석과학으로 설명하기도 한다. 빅데이터 분석을 통하여 전에는 알지 못하던 새로운 사실을 발견하거나 새로운 통찰력을 제공한다는 것이 큰 의미를 갖는다. 빅데이터가 아니라도 우리 주위에서 애널리틱스의 사례를 찾아볼 수..

빅데이터 어디서부터 공부해야하나? 자격증!! (데이터 분석 전문가 ADP)

안녕하세요. 아프락사쓰입니다. 데이터 분석 준전문가(ADsP)에 이어 데이터 분석 전문가(ADP)에 대해 알아보도록 하겠습니다. ADP는 ADsP와 다르게 합격률이 엄청나게 낮고 합격하기 어려운 것으로 소문이 자자합니다. 추후에 도전할 ADP에 대해 같이 알아보도록 하겠습니다. 1. 데이터 분석 전문가 정의 데이터 분석 전문가란 데이터 이해 및 처리 기술에 대한 기본지식을 바탕으로 데이터 분석 기획, 데이터 분석, 데이터 시각화 업무를 수행하고 이를 통해 프로세스 혁신 및 마케팅 전략 결정 등의 과학적 의사결정을 지원하는 직무를 수행하는 전문가를 말한다. 2. 데이터 분석 자격검정의 필요성 오늘날 데이터 처리 및 분석을 통한 데이터 활용은 생산성 향상, 고부가가치 및 고용 창출 등 국가 경제적 가치 창출..

반응형