분산스트리밍

· DevOps/Kafka
Apache Kafka란? 분산 스트리밍 플랫폼 데이터 파이프 라인 구성시, 주로 사용되는 오픈소스 솔루션 대용량의실시간 로그처리에 특화되어 있는 솔루션 데이터의 유실없이 안전하게 전달하는 것이 주목적인 메세지 시스템 클러스트링이 가능하므로 Fault-Tolerant한 안정적인 아키텍처와 빠른 퍼포먼스로 데이터를 처리 수평적으로 서버의 Scale-Out이 가능함 Falut-Tolerant : 시스템 내 장애가 발생하도라도 시스템에 지장을 주지않도록 설계된 시스템 Scale-Out : 서버의 대수를 늘려서 성능을 향상하는 방법 카프카의 탄생 배경 실시간 트랜잭션 처리(OLTP)와 비동기 처리가 동시에 이루어지는 시스템에서 통합된 전송영역 부재로 인한 시스템 복잡도 증대 시스템 복잡도 증대로 인한 운영업무 ..
didue
'분산스트리밍' 태그의 글 목록