编程语言
首页 > 编程语言> > java – Apache Storm:通过Source Spout到Final Bolt的唯一ID跟踪元组

java – Apache Storm:通过Source Spout到Final Bolt的唯一ID跟踪元组

作者:互联网

我想要一种在整个Storm拓扑中唯一识别元组的方法,这样每个元组都可以从Spout跟踪到最终的Bolt.

我理解它的方式是从一个spout传递一个唯一的消息id,例如:

String msgID = UUID.randomUUID();
// emits a line from user tasks with msg id
outputCollector.emit(new Values(task), msgID);

这个ID以某种方式在回到Spout时返回(这可以在之前模拟以在任何时候返回传递的Id吗?).但是在元组上使用get message id例如:

inputTuple.getMessageId()

这将返回一个新消息,而不是由元组生成的Spout传入的消息.参考https://groups.google.com/forum/#!topic/storm-user/xBEqMDa-RZs

问题

1)当收集器发出元组时,有没有办法获取tuple.getMessageId().

2)或者可以在topout中的任何spout或bolt中从元组以某种方式获得在spout中传递的messageId?

最终解决方案
我希望能够在元组发出时在元组上设置ID,然后能够在Storm拓扑中的任何位置再次识别该元组.

或者我的系统将跟踪的唯一messageId必须作为字段/值传递到每个喷口和螺栓的每个输出上.

谢谢

解决方法:

无法在生产者处访问系统生成的ID(仅通过tuple.getMessageId()在消费者处.为了按照您的意愿跟踪元组,您需要(按照您自己的想法)添加ID作为元组的常规字段值,并将其在每个螺栓中复制到相应的输出元组.

标签:java,messaging,apache-storm,fault-tolerance
来源: https://codeday.me/bug/20190708/1399692.html