맵리듀스

“빅데이터란 무엇인가?” 구성요소와 기반 기술의 이해

인간은 매일 먹고 일하고 놀고 데이터를 생산한다. IBM에 따르면 인류가 하루에 생산하는 데이터의 양은 무려 250경 바이트에 이른다. DVD를 쌓는다면 달까지 왕복할 만큼의 데이터다. 이 데이터에는 우리가 전송하는 텍스트와 업로드하는 사진부터 산업용...

하둡 NoSQL 맵리듀스 2017.09.12

IDG 블로그 | 2017년에 버려질 빅데이터 도구 7가지

빅데이터라는 모험이 시작된 지 꽤 됐다. 그러다 보니, 이제 더 이상 새롭지 않은 것들도 있다. 더 나아가 방해가 될 수도 있는 기술도 있다. 빅데이터는 변화가 빠른 엔터프라이즈 기술이다. 일부 소프트웨어는 새로운 기술의 탄생을 알려주는 역할을 할 뿐...

자바 우지 테즈 2016.10.19

하둡의 길을 밝히려면 스파크가 필요하다

지금 하둡에는 절대적으로 견인해 줄 무언가가 필요하다. 하둡은 오래 전부터 맵리듀스(MapReduce)와 동의어로 사용되고 있지만 클라우데라(Cloudera)와 같은 강력한 지지 세력조차 맵리듀스에 등을 돌리고 더 멋지고 섹시한 사촌인, 아파치 스파크...

스파크 하둡 맵리듀스 2015.09.15

ITWorld 용어풀이|스파크(Spark)

2014년 여름, 아파치소프트웨어 재단은 빅데이터 처리를 분산 클러스터에서 고속으로 실행할 수 있는 처리 기반의 스파크(Spark) 1.0을 정식으로 공개했다. 스파크는 빅데이터를 위한 실시간 분산형 컴퓨팅 프로젝트라고 요약할 수 있다. 빅데이터...

스파크 하둡 맵리듀스 2015.04.09

빅데이터 분석에 스파크를 이용해야 하는 5가지 이유

아파치 스파크(Apache Spark)는 하둡 기반의 고급 실시간 분석이 용이하도록 도와주면서 빅데이터의 차세대 '빅씽(Big Thing)'으로 가장 빨리 자리를 굳히고 있다. 지난 몇 년간 하둡이 빅데이터 처리의 가장 지배적인 패...

스파크 하둡 맵리듀스 2015.03.20

하둡 바이어스 가이드 : 운영 환경을 위한 최적의 Hadoop 배포 프로그램을 선택하는 방법

'Hadoop for Dummies'의 저자 Robert D. Schneider가 작성한 이 구매자 가이드는 향후 몇 년간 조직을 지탱해 줄 Hadoop 인프라를 선택할 때 참조할 수 있는 일련의 가이드라인을 제시합니다. 실제로 이 가이...

하둡 맵리듀스 맵알 2014.04.16

얀(YARN), 맵리듀스의 손아귀에서 하둡을 해방하다

처음 시장에 소개된 이후 하둡(Hadoop)은 각기 다른 오픈소스 활동들을 빅 데이터 아키텍처로 통합하는 중심축으로 역할을 해왔다. 일부는 하둡의 본질을 단순한 하둡 분산형 파일 시스템(Hadoop Distributed File System, H...

맵리듀스 HDFS YARN 2013.11.27

구글, “오픈소스 개발자에 특허 소송 안한다”

구글은 먼저 소송을 당하지 않는 이상 오픈소스 소프트웨어에 대해 사용자나 개발자, 디스트리뷰터 누구에게도 특허 소송을 제기하지 않을 것이라고 밝혔다.   구글의 수석 특허 담당 변호사인 듀안 발즈 블로그 포스트를 통해 맵리듀스와...

구글 오픈소스 소송 2013.03.29

트위터, 캐스케이딩으로 하둡 개발 속도 대폭 향상

트위터는 막대한 규모의 메타 데이터와 메시지를 분석하기 위해 하둡에 의지하고 있다. 특히 맵리듀스 개발을 최대한 단순화하기 위해 캐스케이딩 프레임워크를 도입해 큰 효과를 얻고 있다.   트위터의 수천만 사용자는 최신 뉴스와 아이...

트위터 하둡 맵리듀스 2013.02.01

빅 데이터를 위한 하둡, 그 이상의 방법은 없는가

하둡(Hadoop)과 맵리듀스(MapReduce)는 오랫동안 빅 데이터의 중심이었지만, 일부 기업들은 이제 거대하고 지속적으로 성장해가는 데이터세트에서 비즈니스 가치를 뽑아내는 새롭고 더 빠른 방법을 찾고 있다.    ...

구글 하둡 맵리듀스 2012.11.01

하둡-맵리듀스 연계 매출, 2016년 8억 1,280억 달러 성장 예측...IDC

IDC가 발표한 새로운 보고서에 따르면, 대용량 데이터 분석을 위한 하둡과 맵리듀스 프로그래밍 프레임워크와 연계한 소프트웨어 시장은 2011년 7,700만 달러에서 2016년 8억 1,280만 달러로 성장, 연평균 성장률 60.2%를 기록할 것이다. ...

idc 하둡 맵리듀스 2012.05.08

빅 데이터의 열쇠 하둡 총정리 1 : 개념과 알아둬야 할 것

빅 데이터는 클라우드 컴퓨팅만큼이나 널리 확산되고 있는 개념이다. 그러나 빅 데이터의 역량과 한계에 관해서는 사람들이 잘못 알고 있는 부분들이 많다. 특히 빅 데이터와 관련해 사람들은 다음의 질문들에 대한 내용들을 제대로 이해하지 못하고 있다. ...

DBMS 하둡 맵리듀스 2012.01.11

부상하는 클라우드 최적화 DB, 주목 받는 신생업체들

전통적인 관계형 데이터베이스 관리 시스템을 클라우드 환경에 적용하면서 드러난 단점을 해결하기 위해 새로운 데이터베이스 기술을 개발 중인 업체들이 있다. 그리고 이들 중 4개 업체가 최근 개최된 기가옴 스트럭처(GigaOm Structure) 컨퍼런스에...

데이터베이스 SQL DBMS 2011.06.28

마이크로소프트, 드라이어드 기술로 구글 맵리듀스에 도전

대규모 데이터 세트를 처리할 수 있는 툴 시장의 성장에 대응해 마이크로소프트가 드라이어드(Dryad)란 새로운 기술의 베타 버전을 발표했다. 이 기술은 윈도우 서버 클러스터에 걸쳐 대규모 정보를 관리하고 분석할 수 있다.   ...

구글 HPC 마이크로소프트 2010.12.21

클루넷, 모바일용 콘텐츠 인코딩 기술 개발

클루넷(www.clunet.co.kr)은 대규모 분산처리 분야에서 널리 쓰이고 있는 하둡(Hadoop)기반의 맵리듀스(MapReduce) 기술을 활용한 모바일용 인코딩 기술을 개발했다고 5일 밝혔다.   가칭 ‘클라우드 인코...

하둡 클루넷 맵리듀스 2010.11.05

떠오르는 엔터프라이즈 기술 10선⑤

한창 유행이 되고 있는 용어는 누구라도 알고 있다. 하지만 너무나 많기 때문에 거의 소음에 가깝다. 인포월드는 이런 소음 속에서 신호를 추출해 IT 전문가에게 가치있는 것들만을 분리해 내는 일에 착수했다.   분명 현재의 I...

구글 가상화 데스크톱가상화 2009.12.31

회사명 : 한국IDG | 제호: ITWorld | 주소 : 서울시 중구 세종대로 23, 4층 우)04512
| 등록번호 : 서울 아00743 등록발행일자 : 2009년 01월 19일

발행인 : 박형미 | 편집인 : 박재곤 | 청소년보호책임자 : 한정규
| 사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2024 International Data Group. All rights reserved.