스파크

장단점·생태계·사용사례로 비교해 보는 '하둡 vs. 스파크'

기업 내 데이터 업무가 점점 증가하고 있다. 이에 따라 오픈소스 빅데이터 프레임워크인 하둡과 스파크 중 무엇을 고를 것인지가 점점 중요한 문제로 대두되고 있다. 하둡과 스파크의 장단점, 벤더 정보, 고객사 사용 사례를 범주별로 분류해 살펴본다. ...

아파치 스파크 하둡 2016.07.19

마이크로소프트, 크로스 플랫폼 게임 제작 툴 프로젝트 스파크 중단

작년 가을부터 예상된 일이지만, 정말로 프로젝트 스파크(Project Spark)가 중단됐다. 마이크로소프트는 이 게임 제작 플랫폼을 윈도우 스토어 및 엑스박스 마켓플레이스에서 제거했다. 사용자가 별도의 코딩 기술없이도 게임을 만들 수 있도록 해...

게임 스파크 마이크로소프트 2016.05.17

글로벌 칼럼 | 아직도 오픈소스를 이해하지 못하는 CIO를 위하여

수요일, 포레스터 애널리스트 로렌 넬슨이 “기업 의사 결정자 중 41%가 오픈소스 확대가 2016년의 우선 순위 목표라고 밝혔다”는 내용의 보고서를 발표해 커다란 파장을 몰고 왔다. 이 말을 뒤집어 보면, 59%의 기업 경영...

CIO 리눅스 오픈소스 2016.04.28

아파치 스톰 1.0이 준비한 회심의 일격

아파치 스파크(Apache Spark)와 아파치 스톰(Apach Storm)의 스트리밍 데이터 처리 성능을 놓고 벌이는 빅데이터 전문가들의 논쟁을 정리하자면, 대부분 "그래, 스톰이 빠르고 확장성도 좋은 것은 알겠어. 그런데 사용이 너무 어려...

아파치 스톰 스파크 2016.04.18

IT리더에게 듣는다 | "쉽게 바꿀 수 있는 IT인프라 지향" 티켓몬스터 이승배 CTO

한국IDG의 미래 IT환경 준비 현황 조사에는 231명의 국내 기업 IT담당자들이 참여했으며, 이 결과를 토대로 <CIO Korea>는 기업 IT를 총괄하는 CIO들을 만나 심층 인터뷰를 진행했다. <CIO Korea>는 &lsq...

CIO 딥러닝 고객경험 2016.03.21

빅데이터의 엔진, 스파크에 불을 붙이는 7가지 툴

아파치 스파크(Apache Spark)는 단순히 빅데이터 작업을 빠르게 해줄 뿐 아니라 간편하고 편리하며 강력하게 할 수 있도록 해준다. 아파치 스파크는 다양한 툴로 구성돼 있다. 이 아파치 스파크 툴들은 새로운 기능이 추가되거나 성능이 개선되는 등 ...

아파치 스파크 빅데이터 2016.03.21

글로벌 칼럼 | 스파크에서 마음에 들지 않는 5가지

맵리듀스(MapReduce)가 점차 힘을 잃는 추세에 지난해 클라우데라(Cloudera), IBM과 같은 주요 업체들의 전폭적인 투자까지 더해지며 빅데이터 프로세싱 플랫폼인 아파치 스파크(Spark)가 본궤도에 오르기 시작했다. 10줄 미만의 코...

스파크 개발언어 빅데이터 2015.11.16

구글 클라우드 데이터프록, “하둡 및 스파크 클러스터 생성 90초면 충분”

빅데이터로부터 인사이트를 얻는 것은 쉽지도 빠르지도 않은 일이다. 하지만 구글은 하둡과 스파크를 위한 새로운 매니지드 서비스로 이런 기존의 통념을 바꿔놓고자 한다. 구글이 공개 베타 방식으로 새로 출시한 클라우드 데이터프록(Cloud Datapr...

클러스터 스파크 하둡 2015.09.24

하둡의 길을 밝히려면 스파크가 필요하다

지금 하둡에는 절대적으로 견인해 줄 무언가가 필요하다. 하둡은 오래 전부터 맵리듀스(MapReduce)와 동의어로 사용되고 있지만 클라우데라(Cloudera)와 같은 강력한 지지 세력조차 맵리듀스에 등을 돌리고 더 멋지고 섹시한 사촌인, 아파치 스파크...

스파크 하둡 맵리듀스 2015.09.15

가장 흔해빠진 7가지 하둡 및 스파크 프로젝트

뭔가 색다르고 혁신적인 것을 하는 이에게 필요한 모든 지원과 자금을 제공하면 결국 그 사람은 다른 사람과 똑같은 것을 하게 된다는 격언이 있다. 이 격언은 하둡, 스파크, 스톰에도 적용된다. 모두가 자신은 새로운 빅데이터 기술을 사용해 뭔가 특별...

데이터통합 스파크 하둡 2015.08.24

누구나 알아야 할 팀 생산성 이야기 - IDG Tech Dossier

정보 시대에 접어들면서 대내와 협력과 협업, 원격 근무가 그 어느 때보다 중요해진 가운데, 기업은 '팀 생산성'에 주목함으로써 필요한 생산성 향상을 도모할 수 있다. 여기 현대의 기업들에게 요구되는 협업 솔루션의 요건과 이를 충족시키는 ...

시스코 텔레프레즌스 화상회의 2015.07.01

스파크, 스톰에 이은 실시간 하둡 처리의 새로운 경쟁자 '아펙스' 급부상

하둡에서 스트리밍 데이터를 실시간으로 처리한다고 하면, 보통 스톰 아니면 스파크, 둘 가운데 하나를 선택하게 된다. 그러나 상용 제품에서 오픈소스화된 세 번째 경쟁자가 곧 등장한다. 이 솔루션 역시 하둡 울타리를 벗어나 발전할 가능성이 있다. ...

스파크 Apex 하둡 2015.06.09

빅데이터를 위한 불꽃, 실시간 분산형 컴퓨팅 '스파크' - IDG Tech Report

2014년 여름, 정식으로 공개된 아파치 스파크(Apache Spark)는 하둡 기반의 대용량 데이터를 고급 실시간 분석을 쉽게 할 수 있도록 도와준다. 인메모리 처리를 기본으로 하기 때문에 빠르고 지연 속도가 낮은 스파크는 상당히 많은 경쟁자들이 있...

스파크 Spark 빅데이터 2015.04.16

ITWorld 용어풀이|스파크(Spark)

2014년 여름, 아파치소프트웨어 재단은 빅데이터 처리를 분산 클러스터에서 고속으로 실행할 수 있는 처리 기반의 스파크(Spark) 1.0을 정식으로 공개했다. 스파크는 빅데이터를 위한 실시간 분산형 컴퓨팅 프로젝트라고 요약할 수 있다. 빅데이터...

스파크 하둡 맵리듀스 2015.04.09

하둡 이후 꿈틀대는 빅데이터의 미래, '일괄 처리와 실시간 스트리밍 기술의 향방'

스파크(Spark)와 같은 빅데이터 기술들이 요즘 화두다. 그러나 이런 기술들이 과연 빅데이터의 미래일까? 대답은 간단치 않다. 실시간 데이터 세상에서 사람들은 앞으로도 하둡에 집착할까? 451 리서치의 최근 설문 결과에 따르면, 일괄 처리(ba...

스트리밍 일괄처리 커팅 2015.03.31

빅데이터 분석에 스파크를 이용해야 하는 5가지 이유

아파치 스파크(Apache Spark)는 하둡 기반의 고급 실시간 분석이 용이하도록 도와주면서 빅데이터의 차세대 '빅씽(Big Thing)'으로 가장 빨리 자리를 굳히고 있다. 지난 몇 년간 하둡이 빅데이터 처리의 가장 지배적인 패...

스파크 하둡 맵리듀스 2015.03.20

실시간 'BI'를 실행하라, 스톰과 스파크 설명과 그 선택 방법

오픈소스 프로젝트인 스톰(Storm)과 스파크(Spark)에 힘입어 실시간 BI가 주류 기술로 부상하고 있다. 이 두 가지를 선택하는 방법을 소개한다. 실시간 BI(Business Intelligence) 개념이 등장한 지는 꽤 됐다(위키피디아에...

스톰 Storm 스파크 2014.12.15

하둡을 기다리는 것은 고도를 기다리는 것과 같다…가트너

빅데이터에 투자한 대부분의 기업들이 파일럿 이상을 진행하지 않고 있다. 가트너의 한 애널리스트는 "최근 기업들이 데이터 처리 시스템을 배치하기 전 오픈소스 하둡 개발에 대해 구경만 하고 있다. 이는 마치 사무엘 베케트의 <고도를 기...

스파크 하둡 빅데이터 2014.10.22

회사명 : 한국IDG | 제호: ITWorld | 주소 : 서울시 중구 세종대로 23, 4층 우)04512
| 등록번호 : 서울 아00743 등록발행일자 : 2009년 01월 19일

발행인 : 박형미 | 편집인 : 박재곤 | 청소년보호책임자 : 한정규
| 사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2024 International Data Group. All rights reserved.