데이터ㆍ분석

“데이터 레이크의 잠재력을 깨운다” 차세대 스토리지 포맷 ‘아파치 아이스버그’의 이해 - Tech Summary

하둡 생태계는 방대한 데이터를 좀 더 쉽고 효과적으로 저장할 수 있기 때문에 데이터 레이크의 표준 생태계로 자리잡고 있다. 하지만 데이터를 둘러싼 환경은 빠르게 변화하고 있다. 특히 ‘데이터 폭풍’이라고 불리는 현재의 데이터 환경은 성능과 용량, 가용...

Cloudera 2022.06.28

오픈소스 / 클라우드

"클라우드 데이터는 클라우드 DW에" EDW의 7대 과제와 해결 방안 - IDG Summary

최근 많은 기업이 레가시 시스템들을 퍼블릭 클라우드로 전환함에 따라 클라우드 환경에서 생성되는 데이터를 저장, 분석하는 DW(Data Warehouse) 시스템도 클라우드로의 전환을 꾀하고 있다. DW 퍼블릭 클라우드 서비스는 기존 EDW(Enterp...

Cloudera 2022.01.19

IT 관리 / 개발자 / 오픈소스

“클라우데라 카프카에는 특별한 것이 있다" MSA 프로젝트가 카프카에 원하는 요구 사항 구현 - IDG Summary

최근 많은 기업이 정보계 시스템은 물론, 기간계 시스템도 MSA 기반의 애플리케이션으로 전환하고 있다. 기업은 MSA 프로젝트를 수행할 때 메시징 솔루션으로 카프카를 선호하는데, 이는 카프카가 기존 메시징 시스템에 비해 성능면에서 매우 우수하기 때문이...

Cloudera 2022.01.19

데이터ㆍ분석 / 애플리케이션 / 오픈소스

수십억 개의 파일을 저장하는 차세대 빅데이터 저장소 아파치 오존의 이해와 설치 시 고려 사항 - IDG Summary

차세대 HDFS인 아파치 오존(Apache Ozone)은 빅데이터 생태계에서 사용하는 새로운 스토리지 컴포넌트다. 아파치 오존은 기존의 HDFS가 갖고 있던 확장성의 한계, 아키텍처에서의 문제를 극복하기 위해 10년이상 HDFS를 사용하면서 얻었던 경...

Cloudera 2021.01.11

실시간 스트림 처리를 위한 오픈소스 프레임워크 '아파치 플링크'를 사용하는 이유 - IDG Summary

에어비앤비, 알리바바, 넷플릭스와 같은 기업들의 공통점은 스트림 데이터를 이벤트 기반으로 실시간으로 처리함으로써 각 분야에서 독보적인 경쟁력을 확보했다. 그 중심에 아파치 플링크(Apache Flink)가 있다. 매일 수십억 건의 이벤트를 처리하는 플...

Cloudera 2020.06.16

IT 관리 / 개발자 / 오픈소스

"데이터 이동과 가시성 문제를 해결하라" 나이파이, 기본 개념 파악하기 - IDG Tech Insight

정보화 시대가 도래하면서 기업은 데이터 기반의 비즈니스로 전환했다. 하지만, 기업은 데이터를 공유하고 분석하는 데 어려움을 겪고 있었다. 이런 상황을 극복하기 위해 관련 기술이 등장해 많은 부분을 해소했다. 이 가운데 중요한 요소를 빠트렸는데, 바로 ...

Cloudera 2020.01.16

IT 관리 / 보안

클라우데라를 활용한 로그 데이터 수집 최적화 방안 - IDG Summary

로그분석 데이터는 SIEM이나 EDR과 같은 최신 보안 솔루션에서 필수적인 요소다. 따라서 수많은 기업이 로그 분석 솔루션을 도입하고 있는데, 과금 체계가 상당히 다르며 턱없이 비싸다. 이렇게 비싸게 된 이유는 바로 분석하지 않는 데이터에도 과금을 하...

Cloudera 2019.10.23

개발자 / 데이터ㆍ분석

임팔라의 기술적 이해와 대형 클러스터 운영 체크리스트 7선 - IDG Summary

  하이브는 SQL을 지원하긴 하지만 사용자가 SQL을 기반으로 애드혹 쿼리를 요청하거나 BI 도구를 사용해 분석할 경우에는 느릴 수 밖에 없는 한계를 갖고 있다. 기존 하둡용 SQL 엔진이 갖고 있는 성능 문제와 멀티 사용자 지원에 대한 문...

Cloudera 2019.02.14

개발자 / 데이터ㆍ분석

임팔라의 기술적 이해와 대형 클러스터 운영 체크리스트 7선 - IDG Summary

하이브는 SQL을 지원하긴 하지만 사용자가 SQL을 기반으로 애드혹 쿼리를 요청하거나 BI 도구를 사용해 분석할 경우에는 느릴 수 밖에 없는 한계를 갖고 있다. 기존 하둡용 SQL 엔진이 갖고 있는 성능 문제와 멀티 사용자 지원에 대한 문제를 해결하기...

Cloudera 2018.12.13

BI|분석 / 데이터ㆍ분석 / 애플리케이션 / 오픈소스

하둡 해결사, "쿠두"와 "임팔라"의 이해 - IDG Summary

빅데이터 솔루션의 대표격인 하둡은 빠르게 확산되고 있으나 기대만큼의 혁신적인 결과를 얻지 못하고 있다. 그동안 하둡은 스몰 파일 문제부터 업데이트와 삭제가 되지 않고, 속도가 느린 점 등의 많은 문제점이 드러났다. 이를 해결하기 위한 새로운 솔루션들이...

Cloudera 2018.02.02

BI|분석 / 개발자 / 데이터ㆍ분석 / 애플리케이션 / 오픈소스 / 클라우드

클라우드 시대의 빅데이터 구현 전략 - IDG Summary

많은 기업이 클라우드로 이동하고 있다. 빅데이터 또한 클라우드 시대를 대비한 전환 움직임이 활발하다. 빅데이터의 대표격인 하둡은 사실 설계 당시 클라우드를 고려하지 않았다. 빅데이터 선도업체인 클라우데라는 하둡의 클라우드 전략을 제시하면서 클라우드 시...

Cloudera 2016.10.20