В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

pro.kafka

1972 membersпожаловаться на группу
2020 October 29

VG

Vik Gamov in pro.kafka
Sergey Pimenov
Концептуально задача такая, есть Кафка и сервис, который берет событие и дополняет его инфой, для чего делает условно rest в другую систему. У системы есть SLA в виде ограничения tps
Не делать REST call из стримов - класть назад в Кафку и коннектором класть в REST service
источник
23:24пожаловаться#1

SP

Sergey Pimenov in pro.kafka
А в каком месте trottling  происходит? В коннекторе?
источник
23:24пожаловаться#2

SP

Sergey Pimenov in pro.kafka
И имеется в виду kafka connect?
источник
23:25пожаловаться#3

В

Вячеслав in pro.kafka
Я так понял, нужно не складывать в рест, а наоборот забирать из реста инфу для обогащения. А на ресте - лимит по тпс.
источник
23:25пожаловаться#4

VG

Vik Gamov in pro.kafka
Sergey Pimenov
И имеется в виду kafka connect?
да
источник
23:26пожаловаться#5

SP

Sergey Pimenov in pro.kafka
А kafka connect умеет в троттлинг?
источник
23:27пожаловаться#6

SP

Sergey Pimenov in pro.kafka
и есть ли у него MQ sink
источник
23:27пожаловаться#7

SP

Sergey Pimenov in pro.kafka
7
источник
23:27пожаловаться#8

SP

Sergey Pimenov in pro.kafka
rest это я для простоты сказал, там MQ
источник
23:27пожаловаться#9

VG

Vik Gamov in pro.kafka
Вячеслав
Я так понял, нужно не складывать в рест, а наоборот забирать из реста инфу для обогащения. А на ресте - лимит по тпс.
Конвектором забирать в кафку, стримати джойнить и класть назал
источник
23:27пожаловаться#10

SP

Sergey Pimenov in pro.kafka
MQ от IBM, если это важно
источник
23:27пожаловаться#11

В

Вячеслав in pro.kafka
Синк есть, вот такой например
https://github.com/ibm-messaging/kafka-connect-mq-sink
GitHub
ibm-messaging/kafka-connect-mq-sink
This repository contains a Kafka Connect sink connector for copying data from Apache Kafka into IBM MQ. - ibm-messaging/kafka-connect-mq-sink
источник
23:28пожаловаться#12

VG

Vik Gamov in pro.kafka
Uno https://www.confluent.io/hub/confluentinc/kafka-connect-ibmmq
Dos https://www.confluent.io/hub/confluentinc/kafka-connect-ibmmq-sink
www.confluent.io
Kafka Connect IBM MQ Source
Confluent, founded by the creators of Apache Kafka, delivers a complete execution of Kafka for the Enterprise, to help you run your business in real time.
источник
23:28пожаловаться#13

VG

Vik Gamov in pro.kafka
Есть и Синк и сурс
источник
23:28пожаловаться#14

SP

Sergey Pimenov in pro.kafka
А ssl и все дела поддерживаются коннектором?
источник
23:29пожаловаться#15

VG

Vik Gamov in pro.kafka
Sergey Pimenov
А ssl и все дела поддерживаются коннектором?
Откуда я знаю
источник
23:29пожаловаться#16

SP

Sergey Pimenov in pro.kafka
Ок)
источник
23:29пожаловаться#17

VG

Vik Gamov in pro.kafka
Я прислал линки, дальше уважаемый, капайте
источник
23:30пожаловаться#18

SP

Sergey Pimenov in pro.kafka
У нас с кафка коннектом просто есть негативный опыт
источник
23:30пожаловаться#19

SP

Sergey Pimenov in pro.kafka
Vik Gamov
Я прислал линки, дальше уважаемый, капайте
Спасибо!
источник
23:30пожаловаться#20