반응형 빅데이터9 데이터 관련 직업들 빅데이터라는 단어가 생기고 많은 새로운 직업들이 파생됐습니다. 데이터 직군이 많이 관심을 받고 있는데, 정확히 어떤 직업들이 있는지 모르는 듯 합니다. 제가 업무를 하면서 했던 경험을 토대로 한번 정리를 해보고자 합니다. 1. 데이터 분석가 2. 데이터 엔지니어 3. 데이터 사이언티스트 일반적으로 데이터 사이언티스트를 주로 알고 계시는 듯 한데, 각기 3개의 직무가 차이가 있습니다. 보통 이럴 경우 데이터과학 벤다이어그램을 가지고 설명을 하게 됩니다. 이미지 출처 : http://drewconway.com/zia/2013/3/26/the-data-science-venn-diagram 빅데이터에서 이야기하는 데이터 과학(Data Science)은 개발 능력(Hacking Skills), 수학/통계 지식(M.. 2020. 4. 6. [한빛리더스] 실시간 분석의 모든 것 한빛리더스 시즌2 2015년 송년회에 참석을 했다. 그랬더니 보너스 미션으로 원하는 신간을 고르라고 햇는데,보너스인데 미션이니... 좋은 것인지 안좋은 것인지는 잘 모르겠다.ㅎ 내가 번역한 책을 고르려고 하다가...번역했을때의 추억이 물신물신 떠올라서 결국 다른 책을 고르게 되었다. 회사에서 유튜브 관련 업무를 담당하면서,자연스럽게 유튜브에 쌓은 로우 데이터에서 의미있는 수치를 찾게 되었고,그로 인한 빅데이터에 대해 관심을 갖게 되었다. 유튜브에서는 구글 API가 상당히 자세히 잘 되어있기에데이터 분석 시스템 설계에 대해서는 따로 생각해 본적은 없는데,나중에 다른 플랫폼으로 확장을 하기 위해서는 꼭 필요하다고 판단되어서 신청하게 되었다. * Google Developers : https://develop.. 2016. 1. 23. [한빛리더스] 엔지니어를 위한 데이터시각화 이번 미션엔 흥미로운 책이 있어서 신청하게 되었다. 바로 데이터 콜렉션인데, 기존에 이미 선행 도서인 '데이터 시각화를 위한 데이터 인사이트'와데이터 시각화를 위한 데이터 인사이트국내도서저자 : 헌터 휘트니(Hunter Whitney) / 한선용역출판 : 한빛미디어 2014.04.28상세보기 '비즈니스를 위한 데이터 과학' 은 한번씩 읽어 봤다.비즈니스를 위한 데이터 과학국내도서저자 : 포스터 프로보스트(Foster Provost),톰 포셋(Tom Fawcett) / 강권학역출판 : 한빛미디어 2014.07.30상세보기 [Reviews/Book] - [한빛리더스] 데이터 시각화를 위한 데이터 인사이트 [Reviews/Book] - [한빛리더스] 비즈니스를 위한 데이터 과학 이번에는 그렇게 '엔지니어를 위.. 2015. 6. 7. [한빛리더스] 데이터과학 입문 평소에 관심을 가지고 있던 책이 번역되어서 나왔길래 잽싸게 미션북으로 신청했다. 데이터과학 입문국내도서저자 : 레이철 슈트(Rachel Schutt),캐시 오닐(Cathy O'Neil) / 윤영민,허선,전희주역출판 : 한빛미디어 2014.11.03상세보기 그동안 데이터과학에 관심이 많아 다양하고 많은 책들을 읽어왔는데, 이책이 제일 최고인 듯하다!! 님아 짱먹으셈!! 데이터과학에 관심있으면 꼭 봐라! 두번봐라!! [Reviews/Book] - [한빛리더스] 데이터/수치 분석을 위한 파이썬 라이브러리 SciPy와 NumPy [Reviews/Book] - [한빛리더스] R로 배우는 데이터 분석 기본기 데이터 시각화 [Reviews/Book] - [한빛리더스] 데이터 시각화를 위한 데이터 인사이트 [Revie.. 2014. 12. 28. [한빛리더스] 데이터 시각화를 위한 데이터 인사이트 이번 한빛리더스 미션 북은데이터 시각화를 위한 데이터 인사이트 입니다. 데이터 시각화를 위한 데이터 인사이트국내도서저자 : 헌터 휘트니(Hunter Whitney) / 한선용역출판 : 한빛미디어 2014.04.28상세보기 처음 받았을 때,비닐로 패킹도 되어있었고, 책 컬러가 빨려들어가는 느낌었다. 겉표지 질감도 부들부들 하니 참 좋고, 데이터 시각화 라 주제라서 그런지 몰라도 올컬러!! 참 비싸보이는 책이었다.ㅎㅎㅎㅎ 요즘 회사 업무도 그렇고, 데이터 시각화에 참 많은 관심이 있는데, 기존에 있는 수치들을 데이터로 정리하고 그 데이터를 그래프로 보여주는 시각화. 그래서 최근엔 R도 공부하고 있고, 그에 대한 시각화도 공부하고 있다. 아래글 참고. [Reviews/Book] - [한빛리더스] R로 배우는 .. 2014. 6. 29. [한빛리더스] R로 배우는 데이터 분석 기본기 데이터 시각화 이번 한빛리더스의 미션 책은"R로 배우는 데이터 분석 기본기 데이터 시각화" 이다. R로 배우는 데이터 분석 기본기 데이터 시각화국내도서저자 : 후나오 노부오 / 김성재역출판 : 한빛미디어 2014.01.02상세보기 R을 처음 접하는 분들을 위해서 잠시 설명을 하자면, R은 SAS, SPSS 와 비슷한 통계적 계산과 그래프 제작을 위한 언어인데, Windows와 Mac 등 다양한 OS 환경을 모두 제공하고 있는데 무료!라서 아주 좋다. 또한 최근 통계적 이슈가 빅데이터 분석인데, R은 하둡을 지원한다.!! 빅데이터 하둡 R하둡 이란?*빅데이터(Big Data)정형화된 데이터는 물론 메타정보와 센서 데이터, 공정 제어 데이터 등 미쳐 활용하지 못하고 있는 "반 정형화된 데이터"에사진, 이미지처럼 지금까지 .. 2014. 5. 30. [한빛리더스] 데이터/수치 분석을 위한 파이썬 라이브러리 SciPy와 NumPy 벌써 한빛리더스 6기의 마지막 미션이 다가왔다. 이번 미션은 관심있는 책이 리얼타임으로 있길래 신청해보았다. 한빛미디어는 리얼타임 이라는 eBook을 서비스를 하고 있다. 리얼타임은잘 정리해서 조금 늦게 나오는 종이책보다 빠르게 편집해서 DRM-Free 나온 한빛미디어의 eBook 서비스다.http://www.hanb.co.kr/ebook/about_ebook.html 책 구매는 한빛미디어에서만 구입할 수 있다. http://www.hanb.co.kr/ebook/look.html?isbn=9788968486135 파이썬은 인터프리터 언어로 참 쉽고, 국내보다는 외국에서 많이 사용되는 듯 하다. 보통 펄이나 루비랑 비교가 되는데, 경험상 훨~~~씬 쉽다. 그리고 라이브러리도 정말 많고, 장고와 플라스크를 .. 2013. 7. 28. [한빛리더스] Hadoop 하둡 완벽 가이드 이번 미션은 즐겁게 선택을 하게 되었다.왜냐면 평소에 관심이 아주! 많았던 빅데이터의 핵심이라고도 볼수 있는하둡이 미션 북으로 있기에 주저없이 선택하게 되었다. http://hadoop.apache.org/ 아파치 하둡( Apache™ Hadoop™)이란 무엇인가?아파치(Apache)에서 진행하고 있는 아파치 하둡 프로젝트는 안정적이이서 신뢰할 수 있고(reliable), 확장이 용이하며(scalable), 분산 컴퓨팅(distributed computing) 환경을 지원하는 오픈 소스(open-source) 소프트웨어를 개발하는 프로젝트이다. 이 세가지 특징을 잘 기억해 두길 바란다. 인터넷이 발전하면서 "어떻게 사용하는지 아는 것(know-how)"을 찾는 것은 그렇게 어렵지 않은 것 같다. 하지만 .. 2013. 6. 22. [한빛리더스] Head First Data Analysis 공대생부터 시작해서 벌써 10년이 넘었다. 그러나! 공대생도 사람마다 조금은 다르겠지만, 보통 어려워한다는 확통! 그렇다 확률과 통계다. 숫자는 요즘 다양한 곳에서 사용이 되고 있는 만큼 정말 중요한 지표중 하나이다. 특히 마케팅이라던지 그런 곳에서는 의사 결정의 중요한 기준이 되기도 한다. 그만큼 통계에 대한 신뢰가 높다는 것이다. 물론 훌륭한 통계 결과를 위해서는 그만큼의 데이터가 있어야 하겠지만, 어찌됐든 통계는 중요한 지표임에 틀림이 없다. 이번 미션은 이러한 통계등 데이터 분석을 위한 O`REILLY 의 Head First Data Analysis 를 선택했다. 헤드 퍼스트 데이터 분석국내도서저자 : 마이크 밀튼(Michael Milton) / 김경태역출판 : 한빛미디어 2013.04.10상세보.. 2013. 5. 25. 이전 1 다음 반응형
