java – Apache Storm:通过Source Spout到Final Bolt的唯一ID跟踪元组
作者:互联网
我想要一种在整个Storm拓扑中唯一识别元组的方法,这样每个元组都可以从Spout跟踪到最终的Bolt.
我理解它的方式是从一个spout传递一个唯一的消息id,例如:
String msgID = UUID.randomUUID();
// emits a line from user tasks with msg id
outputCollector.emit(new Values(task), msgID);
这个ID以某种方式在回到Spout时返回(这可以在之前模拟以在任何时候返回传递的Id吗?).但是在元组上使用get message id例如:
inputTuple.getMessageId()
这将返回一个新消息,而不是由元组生成的Spout传入的消息.参考https://groups.google.com/forum/#!topic/storm-user/xBEqMDa-RZs
问题
1)当收集器发出元组时,有没有办法获取tuple.getMessageId().
2)或者可以在topout中的任何spout或bolt中从元组以某种方式获得在spout中传递的messageId?
最终解决方案
我希望能够在元组发出时在元组上设置ID,然后能够在Storm拓扑中的任何位置再次识别该元组.
或者我的系统将跟踪的唯一messageId必须作为字段/值传递到每个喷口和螺栓的每个输出上.
谢谢
解决方法:
无法在生产者处访问系统生成的ID(仅通过tuple.getMessageId()在消费者处.为了按照您的意愿跟踪元组,您需要(按照您自己的想法)添加ID作为元组的常规字段值,并将其在每个螺栓中复制到相应的输出元组.
标签:java,messaging,apache-storm,fault-tolerance 来源: https://codeday.me/bug/20190708/1399692.html