本文整理汇总了Python中apache_beam.runners.DataflowRunner.side_input_visitor方法的典型用法代码示例。如果您正苦于以下问题:Python DataflowRunner.side_input_visitor方法的具体用法?Python DataflowRunner.side_input_visitor怎么用?Python DataflowRunner.side_input_visitor使用的例子?那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在类apache_beam.runners.DataflowRunner
的用法示例。
在下文中一共展示了DataflowRunner.side_input_visitor方法的1个代码示例,这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞,您的评价将有助于系统推荐出更棒的Python代码示例。
示例1: test_side_input_visitor
# 需要导入模块: from apache_beam.runners import DataflowRunner [as 别名]
# 或者: from apache_beam.runners.DataflowRunner import side_input_visitor [as 别名]
def test_side_input_visitor(self):
p = TestPipeline()
pc = p | beam.Create([])
transform = beam.Map(
lambda x, y, z: (x, y, z),
beam.pvalue.AsSingleton(pc),
beam.pvalue.AsMultiMap(pc))
applied_transform = AppliedPTransform(None, transform, "label", [pc])
DataflowRunner.side_input_visitor().visit_transform(applied_transform)
self.assertEqual(2, len(applied_transform.side_inputs))
for side_input in applied_transform.side_inputs:
self.assertEqual(
dataflow_runner._DataflowSideInput.DATAFLOW_MULTIMAP_URN,
side_input._side_input_data().access_pattern)