데이터 관련 직업들

빅데이터라는 단어가 생기고 많은 새로운 직업들이 파생됐습니다.

 

데이터 직군이 많이 관심을 받고 있는데, 정확히 어떤 직업들이 있는지 모르는 듯 합니다.

 

제가 업무를 하면서 했던 경험을 토대로 한번 정리를 해보고자 합니다.

 

1. 데이터 분석가

2. 데이터 엔지니어

3. 데이터 사이언티스트

 

일반적으로 데이터 사이언티스트를 주로 알고 계시는 듯 한데, 각기 3개의 직무가 차이가 있습니다.

 

보통 이럴 경우 데이터과학 벤다이어그램을 가지고 설명을 하게 됩니다.

 

THE DATA SCIENCE VENN DIAGRAM

이미지 출처 : http://drewconway.com/zia/2013/3/26/the-data-science-venn-diagram

 

빅데이터에서 이야기하는 데이터 과학(Data Science)은 개발 능력(Hacking Skills), 수학/통계 지식(Math & Statistics Knowledge) 그리고 도메인 전문 지식(Substantive Expertise)이 모두 필요한 분야입니다. 모두 다 잘하면 가장 좋겠지만 상당히 어려운 부분이기 때문에 보통은 팀을 구성해서 업무를 진행하게 됩니다.

 

명확히 이렇다 보다는 일반적으로 이렇게 되어 있다 라고 생각해주시면 좋을듯 합니다.

 

데이터 분석가

- 데이터 엔지니어가 데이터를 수집해주면, 그 데이터를 기반으로 분석을 합니다.

- 추가로 필요한 데이터가 있을 경우 수집을 위한 설계를 합니다.

- 분석에 필요한 기획을 합니다. (고로 커뮤니케이션을 잘해야합니다.)

- 통계적 베이스가 중요합니다.

 

데이터 엔지니어

- 여기저기에 흩어져 있는 데이터를 수집/가공 해서 저장하는 역할을 합니다.

- 데이터 flow 관리를 합니다.

- 데이터 대시보드를 개발합니다.

- 분석가가 필요하다고 하는 데이터 수집을 위한 개발을 합니다.

- 개발 역량이 필요합니다.

 

데이터 사이언티스트 - 전천후!!

- 데이터 분석을 위한 모델링을 주로 합니다. (추천시스템 개발 / 자연어 처리 / AI  학습 등)

- 데이터 분석가가 서비스를 위한 분석을 한다고 하면, 사이언티스트는 연구를 합니다.

- 통계 + 개발 둘 다 중요합니다.