В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

pro.kafka

2125 membersпожаловаться на группу
2020 December 05

A

Andrey in pro.kafka
и прописал путь
источник
22:52пожаловаться#1

A

Andrey in pro.kafka
Сейчас полный лог закину
источник
22:52пожаловаться#2

A

Andrey in pro.kafka
вот конфиг https://dumpz.org/b2sqCzs7h9NS
вот лог https://dumpz.org/cCfQFwz8pqA5
dumpz.org
ubuntu audience-monitoring opt kafka-connect s3 cat worker properties bootstrap servers b-1 audience
ubuntu audience-monitoring opt kafka-connect s3 cat worker properties bootstrap servers b-1 audience e5npgd c11 kafka us-east-1 amazonaws com 9092 plugin path usr share kafka libs opt kafka-connect s3
источник
22:54пожаловаться#3

A

Andrey in pro.kafka
может их скомпилить как то надо, но как это сделать пока непонятно
источник
22:57пожаловаться#4

A

Anton in pro.kafka
Andrey
я так и сделал :(
нужно просто найти jar в котором есть класс - io.confluent.connect.storage.StorageSinkConnectorConfig
источник
22:57пожаловаться#5

A

Anton in pro.kafka
можно скачать сборку confluent и взять из нее
источник
22:57пожаловаться#6

A

Andrey in pro.kafka
а по идее условный maven должен был бы подтянуть всё что надо?
источник
22:58пожаловаться#7

A

Anton in pro.kafka
или просто запустить все из сборки confluent
источник
22:58пожаловаться#8

A

Andrey in pro.kafka
Завтра попробую сборку confluent, надеюсь заработает
источник
23:00пожаловаться#9
2020 December 06

A

Andrey in pro.kafka
Anton
или просто запустить все из сборки confluent
Попробовал из сборки конфлуента, та же ошибка. Этот класс лежит тут https://github.com/confluentinc/kafka-connect-storage-common но собрать его не получается (всё что я знаю это то что надо запустить mvn build). Может его как то другим способом собирать надо?
GitHub
confluentinc/kafka-connect-storage-common
Shared software among connectors that target distributed filesystems and cloud storage. - confluentinc/kafka-connect-storage-common
источник
11:16пожаловаться#10

A

Anton in pro.kafka
Andrey
Попробовал из сборки конфлуента, та же ошибка. Этот класс лежит тут https://github.com/confluentinc/kafka-connect-storage-common но собрать его не получается (всё что я знаю это то что надо запустить mvn build). Может его как то другим способом собирать надо?
GitHub
confluentinc/kafka-connect-storage-common
Shared software among connectors that target distributed filesystems and cloud storage. - confluentinc/kafka-connect-storage-common
у меня нет больше идей, не понимаю как конфлюент не смог запустить свой же коннектор
источник
11:39пожаловаться#11

A

Andrey in pro.kafka
Anton
нужно просто найти jar в котором есть класс - io.confluent.connect.storage.StorageSinkConnectorConfig
А можно это какой-то командой сделать? Ну то есть у меня есть пачка каких то Jar'ов. Как то можно посмотреть что в них есть?
источник
11:41пожаловаться#12

A

Anton in pro.kafka
Andrey
А можно это какой-то командой сделать? Ну то есть у меня есть пачка каких то Jar'ов. Как то можно посмотреть что в них есть?
https://stackoverflow.com/questions/14373788/linux-cmd-to-search-for-a-class-file-among-jars-irrespective-of-jar-path
Stack Overflow
Linux cmd to search for a class file among jars irrespective of jar path
I want to search for a particular class file among many jar files without giving the location of each jar file.

Is this possible with a simple command?

I tried this command:

grep Hello.class *.j...
источник
11:44пожаловаться#13

A

Andrey in pro.kafka
Anton
https://stackoverflow.com/questions/14373788/linux-cmd-to-search-for-a-class-file-among-jars-irrespective-of-jar-path
Stack Overflow
Linux cmd to search for a class file among jars irrespective of jar path
I want to search for a particular class file among many jar files without giving the location of each jar file.

Is this possible with a simple command?

I tried this command:

grep Hello.class *.j...
странно, такой файл существует
https://dumpz.org/cP8SdTMF432E
dumpz.org
grep -R StorageSinkConnector Config opt kafka-connect s3 confluentinc-kafka-c onnect lib Binary file
grep -R StorageSinkConnector Config opt kafka-connect s3 confluentinc-kafka-c onnect lib Binary file opt kafka-connect s3 confluentinc-kafka-c onnect lib kafka-connect-storag e-core-5 jar matches work
источник
11:50пожаловаться#14

A

Anton in pro.kafka
Andrey
А можно это какой-то командой сделать? Ну то есть у меня есть пачка каких то Jar'ов. Как то можно посмотреть что в них есть?
требуемый класс находится внтури kafka-connect-storage-common-5.5.2.jar из zip файла с коннектором
источник
11:52пожаловаться#15

A

Anton in pro.kafka
так что вероятно как то неправильно установлен коннектор
источник
11:52пожаловаться#16

A

Andrey in pro.kafka
да, в том то и дело что он там есть и путь к ним прописан в воркере
источник
11:52пожаловаться#17

A

Andrey in pro.kafka
о, разобрался )
источник
11:57пожаловаться#18

A

Andrey in pro.kafka
в общем надо было путь не прямо до файлов .jar указывать, а на директорию выше, в которой будет директория ещё одна со всеми этими файлами
источник
11:58пожаловаться#19

A

Andrey in pro.kafka
А можно ли заюзать Avro к kafka-connect sink без поднятия Schema Registry? Может как то в файле указать схему?
источник
16:08пожаловаться#20