데이터ㆍ분석

데이터 과학자가 되고 싶다면

Mary Brandel | Network World

2013.04.12

오페라 내부에서 ‘데이터 과학자'라 불리는 이들은 기계 학습 수준에서 대량의 데이터 흐름으로부터 예측적 인텔리전스를 발견하고 추출하기 위한 통계 모델과 패턴 인식 알고리즘을 개발하는, 레이든의 분류를 따르자면 1번 유형에 맞는 인물들이다.

이들의 작업을 통해 발견된 패턴은 금융 사기 감소나 부실 모기지 감지 등 비즈니스에 직접적 가치로 전달되고 있다. 스포엘스트라는 구글과 같은 기업들에는 이러한 유형의 데이터 과학자가 수백 명 고용되어 있을 것이라 평가하며 오페라의 경우에는 약 700 명의 직원들 중 1/3 가량이 기계 학습 전문가라 소개했다.

탤런트 애널리틱스(Talent Analytics Corp.)의 CEO 그레타 로버츠는 오늘날 데이터 과학자의 역할은 4개의 기능적 범주로 분류되어 이해되고 있다고 설명하고 있다.

이 기관은 데이터 과학자들을 대상으로 그들이 11 개의 애널리틱스 기능들에 얼마 간의 시간을 투자하는지에 관한 설문을 진행해 그들의 역할을 (데이터 획득 및 준비, 분석에 대부분의 시간을 할애하는) 데이터 준비 전문가, (프로그래밍과 일부 분석을 담당하는) 프로그래머, (데이터 관리 및 운영, 제출, 해석, 설계에 집중하는) 관리자, 그리고 이 모든 영역을 두루 다루는 제너럴리스트(generalist) 등 4분류로 나눴다.

로버츠는 “이 결과를 처음 접하고 든 생각은 ‘이 정의에 맞는 사람은 절대 없을 거야, 이게 말이 돼?’라는 것이었다. 모두에게 생소한 역할이었기 때문에 여기에 아무 것이나 다 집어 넣는 모양새였다. 구체화가 지나치면 알맹이는 사라지게 된다. 많은 비즈니스들은 데이터 과학자라는 역할을 하나의 그룹이 담당해야 할 여러 기능들을 홀로 처리하는 것이라 인식하고 있다. 오늘날 데이터 과학자에 대한 공급이 절대적으로 부족한 것 역시 무리가 아니다”라고 말했다.

그는 이어 “하지만 다행스러운 점이라면 데이터 과학자라는 새로운 역할의 대두로 인해 기존에 한 두 가지의 역량을 갖추고 있던 이들에게 새로운 역량을 개발할 동기가 생겨났다는 것이다”라고 말했다.

필요한 역량과 자격은?

로버츠의 설명처럼 데이터 과학자에게 요구되는 역량이라 소개되는 목록은 점점 더 늘어가고 있다. 일견 당혹스럽게도 보인다. 가장 빈번히 언급되는 역량들만 열거해보자. 고급 수학, 통계 분석(R, SAS, STATA 등), 프로그래밍(C, C++, 파이썬(Python), 자바(Java) 등), SQL 데이터베이스, 하둡(Hadoop)이나 맵리듀스(MapReduce) 등의 플랫폼, 데이터 마이닝 및 모델링, 데이터 시각화, 창의력, 커뮤니케이션 능력, 그리고 마지막으로 비즈니스에 대한 이해까지, 말 그대로 벅찰 정도로 많다.

데이터 과학자에게 요구되는 역량은 분명 지난 세대의 데이터 애널리스트들에게 요구돼오던 것과는 차이가 있다. 레이든은 “그들이 다뤄야 하는 데이터의 다양성은 이전과는 비교 되지 않는다. 때문에 그들에겐 여러 분석 도구들을 적절히 정렬해야 한다는 과제 역시 강조되고 있다”라고 말했다.

그는 이어서 “데이터 과학자는 프로그래밍 역량뿐 아니라 정량법, 조사 및 모델링 등과 관련한 배경 역시 갖춰야 한다. 또 무수한 데이터 가운데서 의미 있는 것들만을 골라낼 수 있는 능력 역시 중요하다. 효율적인 작업을 위해서는 자신이 적용하는 도구와 방법론에 대한 이해가 부족한 이들에게 문제를 설명해줄 커뮤니케이션 능력과 비즈니스 영역에 대한 이해 지식 역시 갖춰야 할 것이다”라고 설명했다.

라이폴디는 데이터 과학자를 타 애널리틱스 전문가들과 차별화하는 핵심에 대해 데이터가 보여주는 의미와 그에 대한 대응 방안을 제시해 줄 커뮤니케이션 능력이라 말했다. 그는 “원하는 모든 데이터를 제대로 분석할 수 있다 해도, 분석의 결과물을 제대로 표현할 수 없는 이라면 데이터 과학자라 할 수 없다”라고 강조했다.

비즈니스들이 데이터 과학자를 원하는 이유는 이탈 고객 감소나 복수 채널 타겟팅, 금융 리스크 완화 등 선진 비즈니스 전략 시행 과정에 그가 가치를 제공해줄 수 있을 것이라 믿기 때문이라는 사실을 기억하자.

로버츠는 이 요구 역량 사이의 충돌에 관해서도 이야기했다. 그녀는 “몇 날 며칠을 컴퓨터 앞에 앉아서 보내다 어느 순간 벌떡 일어나 유려한 프리젠테이션을 펼친다? 너무나 다른 두 행동 양식이다”라고 말했다.

(다양한 기계 학습 영역에 데이터 과학자를 고용하고 있는) 오페라 솔루션즈에서 강조되는 데이터 과학자의 역량이란, 정량법에 대한 배경, 수학 및 통계학적 개념, 이들 개념을 컴퓨터 프로그램 안에 전달할 수 있는 능력, 대규모 데이터에 대한 익숙함, 비즈니스 문제 해결에 대한 흥미 등이 있다.

이 기업의 애널리틱스 본부 글로벌 본부장 조셉 밀라나는 “그가 수학에 대한 친화력과 문제 해결 능력만 갖추고 있다면 기계 학습 알고리즘은 언제라도 교육할 수 있는 부분이다. 응용 수학자이거나 신경망 구축 경험자일 필요 까지도 없다. 핵심은 에너지와 관심이다”라고 강조했다.

어떤 배경이 필요할까?

오페라 솔루션즈에서 뛰어난 성과를 보이는 데이터 과학자들은 대개 높은 교육 수준을 자랑하며, 개중에는 박사 학위를 취득한 사람도 있다.

밀라나는 “기계 학습 과학의 발전과 지속적으로 소개되는 신종 테크닉들을 고려했을 때, 과학자들이 앞서간 교육을 받고 최신 아이디어를 받아들이는 것은 꼭 필요하다”라고 말했다. 다이스 닷컴에서도 데이터 과학자 채용 가운데 절반 이상에서 박사 학위 이상을 요구하고 있다고 실버는 말했다. “없으면 절대 안 되는 건 아니지만, 있으면 큰 가산점을 받을 수 있다”라고 그는 말했다.

오페라 솔루션즈는 컴퓨터 과학, 전기공학, 통계, 기계공학, 물리학 등 다양한 학문의 인재를 골고루 채용한다. 이런 학제간 지식은 아주 유용하게 쓰일 수 있다고 밀라나는 말한다. 예를 들어, 수문학에서 비롯된 공식이 주식 시장에서 쓰이는 경우도 있었다.

그렇지만 대부분 데이터 과학자들에게 있어 박사 학위는 필수적인 사항이 아니며, 경영 분석 및 정량 분석 분야에서 일하는 이들(특히 고급 수학 및 통계 모형 경험이 있는 이들)의 경우에는 빅 데이터 및 예측 모델링과 같은 주요 영역에서 교육 및 멘토링을 제공하는 회사에 취업할 경우 데이터 과학자로서 충분히 제 역할을 해 낼 것이라고 레이든은 설명했다.

로버츠는 특정 기술이나 학문적 성취에 집중하는 것이 지원자의 잠재적 생각을 알아보는 기회가 되기도 한다고 전했다. 그는 “기업들에서 알아보고자 하는 것은 ‘당신은 배움을 즐기는 사람인가?’ 이다. 이를 알아보기 위한 방법은 여러 가지가 있다”라고 말했다.

로버츠는 이어 적성 분석 검사(Talent Analytics survey)에서도 데이터 과학자가 되기 위한 자질로는 호기심, 창의성, 객관성, 구조적 사고, 그리고 세부 사항에 대한 이해 등이 꼽혔다고 말했다.

밀라나와 스포엘스트라 역시 지원자들에게서 주로 보는 자질이 호기심, 논리적 사고, 상식, 인내심, 현실성, 그리고 훌륭한 판단력이라고 동의했다.

앞으로도 데이터 과학자에 대한 수요가 늘 것임은 분명하다. 그러나 데이터 과학자의 역할 자체가 비교적 새로운 것이기 때문에 그 역할 및 기업에서 어떻게 이들의 자질을 구성하고 발전시켜 나갈지는 시간에 따라 점차 변화해 갈 것이다.

로버츠는 “이는 스스로 찾아 배우기를 꺼려하지 않는 IT, 프로젝트 매니지먼트, 그리고 제품 매니지먼트 종사자들에게 아주 큰 기회다”라고 강조했다. ciokr@idg.co.kr

Tags 빅 데이터 데이터 과학자

함께 보면 좋은 콘텐츠

빅 데이터 시대의 클라우드와 사례 연구를 통한 차별화 전략 - IDG Summary

한국전파진흥협회-한국EMC, ‘IT 데이터 과학자 양성과정’ 개설

사례로 보는 빅 데이터 성공 가이드 - IDG Deep Dive

실생활에 구현한 빅 데이터 10가지

기업의 42%, 올해 빅 데이터 투자 ... 가트너 설문조사

2013년 빅 데이터 시장 현황 3 - 빅 데이터 활용, 숨은 그림 찾기는 '시작됐다'

빅 데이터 시각화를 통해 직원 통찰력을 증대시켜라...이베이의 과제

빅 데이터 준비 A to Z - IDG Deep Dive

데이터 속에서 가치를 창출하는 데이터 과학자 - IDG Tech Report

빅 데이터 해결사, 2012년 하둡의 현주소 - IDG Deep Dive

Surfshark

“유료 VPN, 분명한 가치 있다” VPN 선택 가이드

ⓒ Surfshark VPN(가상 사설 네트워크, Virtual Private Network)은 인터넷 사용자에게 개인 정보 보호와 보안을 제공하는 중요한 도구로 널리 인정받고 있다. VPN은 공공 와이파이 환경에서도 데이터를 안전하게 전송할 수 있고, 개인 정보를 보호하는 데 도움을 준다. VPN 서비스의 수요가 증가하는 것도 같은 이유에서다. 동시에 유료와 무료 중 어떤 VPN을 선택해야 할지 많은 관심을 가지고 살펴보는 사용자가 많다. 가장 먼저 사용자의 관심을 끄는 것은 별도의 예산 부담이 없는 무료 VPN이지만, 그만큼의 한계도 있다. 무료 VPN, 정말 괜찮을까? 무료 VPN 서비스는 편리하고 경제적 부담도 없지만 고려할 점이 아예 없는 것은 아니다. 보안 우려 대부분의 무료 VPN 서비스는 유료 서비스에 비해 보안 수준이 낮을 수 있다. 일부 무료 VPN은 사용자 데이터를 수집해 광고주나 서드파티 업체에 판매하는 경우도 있다. 이러한 상황에서 개인 정보가 유출될 우려가 있다. 속도와 대역폭 제한 무료 VPN 서비스는 종종 속도와 대역폭에 제한을 생긴다. 따라서 사용자는 느린 인터넷 속도를 경험할 수 있으며, 높은 대역폭이 필요한 작업을 수행하는 데 제약을 받을 수 있다. 서비스 제한 무료 VPN 서비스는 종종 서버 위치가 적거나 특정 서비스 또는 웹사이트에 액세스하지 못하는 경우가 생긴다. 또한 사용자 수가 늘어나 서버 부하가 증가하면 서비스의 안정성이 저하될 수 있다. 광고 및 추적 위험 일부 무료 VPN은 광고를 삽입하거나 사용자의 온라인 활동을 추적하여 광고주에게 판매할 수 있다. 이 경우 사용자가 광고를 보아야 하거나 개인 정보를 노출해야 할 수도 있다. 제한된 기능 무료 VPN은 유료 버전에 비해 기능이 제한될 수 있다. 예를 들어, 특정 프로토콜이나 고급 보안 기능을 지원하지 않는 경우가 그렇다. 유료 VPN의 필요성 최근 유행하는 로맨스 스캠은 인터넷 사기의 일종으로, 온라인 데이트나 소셜 미디어를 통해 가짜 프로필을 만들어 상대를 속이는 행위다. 이러한 상황에서 VPN은 사용자가 안전한 연결을 유지하고 사기 행위를 방지하는 데 도움이 된다. VPN을 통해 사용자는 상대방의 신원을 확인하고 의심스러운 활동을 감지할 수 있다. 서프샤크 VPN은 구독 요금제 가입 후 7일간의 무료 체험을 제공하고 있다. ⓒ Surfshark 그 외에도 유료 VPN만의 강점을 적극 이용해야 하는 이유는 다음 3가지로 요약할 수 있다. 보안 강화 해외 여행객이 증가함에 따라 공공 와이파이를 사용하는 경우가 늘어나고 있다. 그러나 공공 와이파이는 보안이 취약해 개인 정보를 노출할 위험이 있다. 따라서 VPN을 사용하여 데이터를 암호화하고 개인 정보를 보호하는 것이 중요하다. 서프샤크 VPN은 사용자의 개인 정보를 안전하게 유지하고 해킹을 방지하는 데 유용하다. 개인정보 보호 인터넷 사용자의 검색 기록과 콘텐츠 소비 패턴은 플랫폼에 의해 추적될 수 있다. VPN을 사용하면 사용자의 IP 주소와 로그를 숨길 수 있으며, 개인 정보를 보호할 수 있다. 또한 VPN은 사용자의 위치를 숨기고 인터넷 활동을 익명으로 유지하는 데 도움이 된다. 지역 제한 해제 해외 여행 중에도 한국에서 송금이 필요한 경우가 생길 수 있다. 그러나 IP가 해외 주소이므로 은행 앱에 접근하는 것이 제한될 수 있다. VPN을 사용하면 지역 제한을 해제해 해외에서도 한국 인터넷 서비스를 이용할 수 있다. 따라서 해외에서도 안전하고 편리하게 인터넷을 이용할 수 있다. 빠르고 안전한 유료 VPN, 서프샤크 VPN ⓒ Surfshark 뛰어난 보안 서프샤크 VPN은 강력한 암호화 기술을 사용하여 사용자의 인터넷 연결을 안전하게 보호한다. 이는 사용자의 개인 정보와 데이터를 보호하고 외부 공격으로부터 사용자를 보호하는 데 도움이 된다. 다양한 서버 위치 서프샤크 VPN은 전 세계 곳곳에 여러 서버가 위치하고 있어, 사용자가 지역 제한된 콘텐츠에 액세스할 수 있다. 해외에서도 로컬 콘텐츠에 손쉽게 접근할 수 있음은 물론이다. 속도와 대역폭 서프샤크 VPN은 빠른 속도와 무제한 대역폭을 제공하여 사용자가 원활한 인터넷 경험을 누릴 수 있도록 지원한다. 온라인 게임, 스트리밍, 다운로드 등 대역폭이 필요한 활동에 이상적이다. 다양한 플랫폼 지원 서프샤크 VPN은 다양한 플랫폼 및 디바이스에서 사용할 수 있다. 윈도우, 맥OS, iOS, 안드로이드 등 다양한 운영체제 및 디바이스에서 호환되어 사용자가 어디서나 안전한 인터넷을 즐길 수 있다. 디바이스 무제한 연결 서프샤크 VPN은 무제한 연결을 제공하여 사용자가 필요할 때 언제든지 디바이스의 갯수에 상관없이 VPN을 사용할 수 있다.

평점 - 댓글 -개

평점