Doris Kafka 커넥터의 실시간 데이터 전송 마법 "데이터 패키지": 1 부
Apache Doris는 다차원 데이터 수집 기능을 제공합니다. Doris Kafka Connector [1]Kafka Connect 생태계의 확장 된 구성 요소로서 Kafka 데이터를 Doris로 가져 오는 것을 지원할뿐만 아니라 방대한 Kafka Connect 생태계에 의존하여 다음 기능을 달성합니다. [2]:
풍부한 형식 지원
- 기본적으로 Avro/Protobuf와 같은 복잡한 형식을 구문 분석합니다.
- 스키마를 자동으로 등록하고 변환합니다.
- 이진 데이터 스트림의 효율적인 처리를 최적화합니다.
여러 데이터 소스의 이기종 통합
- 관계형 데이터베이스: MySQL, Oracle, SQL Server, DB2, Informix 등
- NOSQL 데이터베이스: Mongodb, Cassandra 등
- 메시지 대기열 시스템: ActiveMQ, IBM MQ, RabbitMQ 등
- 클라우드 데이터웨어 하우스: Snowflake, Google BigQuery, Amazon Redshift 등
Post Comment