J*G
2 楼
现在就比较红,听说颜色会越来越深,是吗?
a*y
3 楼
各位大侠,
我理解kafka的producer是push log 到broker,如何能够保证producer不会
floodbroker?比如client有个bug,所有的user都不停的send log。理论上broker的处
理能力是有限的,即使使用system 的pagecache,如果无法处理实时送过来的log,是
否会有data loss,应该怎么避免呢?
多谢!
我理解kafka的producer是push log 到broker,如何能够保证producer不会
floodbroker?比如client有个bug,所有的user都不停的send log。理论上broker的处
理能力是有限的,即使使用system 的pagecache,如果无法处理实时送过来的log,是
否会有data loss,应该怎么避免呢?
多谢!
w*z
5 楼
如果是load 问题, 就scale, 加 broker, 这不是distributed system 的精髓? 如
果是 client bug, 你应该有必要 的 monitoring and alerting, 在把系统搞当之前应
该就被alert 了。
【在 a****y 的大作中提到】
: 各位大侠,
: 我理解kafka的producer是push log 到broker,如何能够保证producer不会
: floodbroker?比如client有个bug,所有的user都不停的send log。理论上broker的处
: 理能力是有限的,即使使用system 的pagecache,如果无法处理实时送过来的log,是
: 否会有data loss,应该怎么避免呢?
: 多谢!
果是 client bug, 你应该有必要 的 monitoring and alerting, 在把系统搞当之前应
该就被alert 了。
【在 a****y 的大作中提到】
: 各位大侠,
: 我理解kafka的producer是push log 到broker,如何能够保证producer不会
: floodbroker?比如client有个bug,所有的user都不停的send log。理论上broker的处
: 理能力是有限的,即使使用system 的pagecache,如果无法处理实时送过来的log,是
: 否会有data loss,应该怎么避免呢?
: 多谢!
g*e
6 楼
Have more partitions on your Kafka topic
Rate limit client and drop event
Rate limit client and drop event
相关阅读
好吧,Disable GC的问题好虫,赵册老师,问个问题菜鸟请教有什么免费或者便宜的cloud server满足干私活的需求?你们都无聊到说群口相声了?吐槽一下在国内招程序开发的郁闷 (转载)我为何穷追不舍C++确实不适合做大项目各位要是真懂设计大型系统,应该知道要尽量简化你们ee读一个master by course要五年吗?索男们跪下吧 $19B怎样让google搜索结果指向skin color act 5? (转载)哎。又有公司从.NET转Node了看了半天帖子,终于弄明白了一件事有没有跟我一样用免费软件取代盗版下面的code怎么样improve?gmail用啥语言写的?https://mail.google.com/mail/u/0/?shva=1#inbox解析一下。Why we love Scala at Coursera如何证明职场歧视? (转载)j2ee是屎一样的东西,我4个月前就说过了请教一个makefile 小问题