| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | 6 | |
| 7 | 8 | 9 | 10 | 11 | 12 | 13 |
| 14 | 15 | 16 | 17 | 18 | 19 | 20 |
| 21 | 22 | 23 | 24 | 25 | 26 | 27 |
| 28 | 29 | 30 | 31 |
- 프로그래머스
- 숫자게임
- programmers
- sql injection
- Logstash
- topic
- Apache Kafka
- segment
- 자료형
- 딕셔너리
- 튜플
- 불리언
- CSRF
- 조건문
- Kafka
- 로그관리
- CORS
- rabbitmq
- Python
- Kibana
- Elasticsearch
- partition
- 문자열
- Lv3
- 데이터분석
- XSS
- queue
- elk스택
- Message
- BFS
- Today
- Total
목록Kafka (2)
dev-minchur 님의 블로그
Topic, Partition, Segment란??
Apache Kafka의 주요요소Apache Kafka의 주요요소중에서 Producer, Consumer, Consumer Group에 대해서 먼저 살펴보자Producer메시지를 생산(Produce)해서 Kafka의 Topic으로 메시지를 보내는 애플리케이션이다.ConsumerTopic의 메시지를 가져와서 소비(Consume)하는 애플리케이션이다.Consumer GroupTopic의 메시지를 사용하기 위해 협력하는 Consumer들의 집합이다.하나의 Consumer는 하나의 Consumer Group에 포함되며, Consumer Gorup내의 Consumer들은 협력하여 Topic의 메시지를 분산 병렬처리한다.Producer와 Consumer의 분리 (Decoupling)Producer와 Consumer..
Apache Kafka란?
Apache Kafka란 무언인가??Apache Kafka란 "Data in Motion Platform for Enterprise"라고 할 수 있고 "Real-time Event Streams"라고 할수 있다. 요즘 데이터의 양이 기하급수적으로 증가하면서, 이를 효과적으로 처리하고 관리하는게 매우 중요해졌다. Apache Kafka는 이러한 요구를 충족시키기 위해 개발된 오픈 소스 분산 스트리밍 플랫폼이다. 실시간으로 데이터를 발행하고 구독하며, 저장하고 처리할 수 있는 기능이 있다.Event란??Event란 Something Happend!! 즉, Event는 비즈니스에서 일어나는 모든 일, 데이터를 의미한다.예를 들어보면 다음과 같다.웹사이트에서 무언가를 클릭하는 것청구서를 발행송금배송 물건의 위치..