BigData

BigData

[Apache Kafka] 카프카(KAFKA) 디자인의 특징을 알아보자

해당 글의 모든 레퍼런스는 "카프카, 데이터 플랫폼의 최강자" (고승범, 공용준 지음)을 알립니다. https://coupa.ng/b5xV58 카프카 데이터 플랫폼의 최강자:실시간 비동기 스트리밍 솔루션 Kafka의 기본부터 확장 응용까지 COUPANG www.coupang.com "이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다." 카프카는 분산된 데이터 파이프라인을 표준화하고 통합하길 원했고, 처리량에 중점을 두고 설계되었습니다. 이에 따라서 카프카는 높은 처리량과 빠른 메시지 전송, 운영 효율화 등을 위해 분산 시스템, 페이지 캐시, 배치 전송 처리 등의 기능이 구현되었습니다. 이제 카프카는 어떻게 성능을 높였는지 카프카 디자인의 특징을 알아 보겠습니다. 🌵 분..

BigData

[Apache Kafka] 카프카(KAFKA)의 특징을 알아보자

해당 글의 모든 레퍼런스는 "카프카, 데이터 플랫폼의 최강자" (고승범, 공용준 지음) 을 알립니다. https://coupa.ng/b5xV58 카프카 데이터 플랫폼의 최강자:실시간 비동기 스트리밍 솔루션 Kafka의 기본부터 확장 응용까지 COUPANG www.coupang.com "이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다." 카프카는 기존의 메시징 시스템과는 차별화되는 특징이 있습니다. 크게 5개 정도로 정리 할 수 있습니다. 프로듀서와 컨슈머의 분리 멀티 프로듀서, 멀티 컨슈머 디시크에 메시지 저장 확장성 높은 성능 이제 크게 5개 정도로 정리된 차별화된 특징을 알아 보겠습니다. 프로듀서와 컨슈머의 분리 기존의 메시징 시스템들은 Pub/Sub 모델이 아닌..

BigData

[Apache Kafka] 카프카(KAFKA)의 동작 방식과 원리를 알아보자

해당 글의 모든 레퍼런스는 "카프카, 데이터 플랫폼의 최강자" (고승범, 공용준 지음)을 알립니다. https://coupa.ng/b5xV58 카프카 데이터 플랫폼의 최강자:실시간 비동기 스트리밍 솔루션 Kafka의 기본부터 확장 응용까지 COUPANG www.coupang.com "이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다." 카프카는 메시징 서버로 동작합니다. 여기서 메시징 시스템을 알아보겠습니다. 메시징 시스템은 메시지라고 불리는 데이터 단위를 퍼블리셔(pubilsher), 프로듀서(producer)에서 카프카에 토픽(topic)이라는 각각의 메시지 저장소에 데이터를 저장하면, 서브스크라이버(subscriber), 컨슈머(comsumer)가 원하는 토픽에서..

BigData

[Apache Kafka] 카프카(KAFKA)란 무엇인지 알아보자 [1]

해당 글의 모든 레퍼런스는 "카프카, 데이터 플랫폼의 최강자" (고승범, 공용준 지음) 을 알립니다. https://coupa.ng/b5xV58 카프카 데이터 플랫폼의 최강자:실시간 비동기 스트리밍 솔루션 Kafka의 기본부터 확장 응용까지 COUPANG www.coupang.com "이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다." 아파치 카프카(Apache Kafka)는 미국의 대표적인 비즈니스 인맥 소셜네트워크 서비스인 링크드인(linkedin)에서 처음 출발한 기술로, 제이 크랩스(Jay Kreps), 니하 나케디(Neha Narkhede), 준 라오(Jun Rao) 와 함께 팀을 구성하여 모든 시스템으로 데이터를 전송할 수 있고, 실시간 처리도 가능하며, ..

busybeans
'BigData' 카테고리의 글 목록 (7 Page)