Исследуем пределы пропускной способности Kafka в инфраструктуре Dropbox

[mosinnik]

А где кофиг железа? 60Мб/с это примерно половина гигабитной сетки, т.е. как раз для репликафатор 2, так что получилось отличное тестирование сети, жаль что мы не узнаем о том, во что уперлась кафка.

[4umak]

Дааа, конфиги железа, конечно, очень хотелось бы поглядеть, но увы, Dropbox ими как-то не поделились:(

Их там в оригинальной статье спрашивал в комментах, но они пока молчат.

[vlanko]

«Мы протестировали экстремальный вариант развития событий, когда сообщения состоят из одного символа, и зафиксировали гораздо более высокую пропускную способность, так как диск и сеть перестали быть узким местом.»
Так что похоже да, упор в сеть.

[gecube]

> 60 МБ/с * 0.8 ~= 50 Мб/сек.

Этот меджик не понял. Напишите более ясно единицы измерения (Мб — Мбит? И почему МБ/с и Мб/сек???). И да, их нужно везде писать в одинаковом формате (я об этом говорил в предыдущей статье про измерения скорости ВМ в облаках...).

В оригинале, кстати, было:

> 60MB/s * 0.8 ~= 50MB/s

что вполне однозначно. И, да, можете минусовать, как любите — мне пофиг

P.s. и, да, картинки к статьям у вас реально крутые! Молодцы!