本文整理匯總了Python中apache_beam.runners.DataflowRunner.side_input_visitor方法的典型用法代碼示例。如果您正苦於以下問題:Python DataflowRunner.side_input_visitor方法的具體用法?Python DataflowRunner.side_input_visitor怎麽用?Python DataflowRunner.side_input_visitor使用的例子?那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在類apache_beam.runners.DataflowRunner
的用法示例。
在下文中一共展示了DataflowRunner.side_input_visitor方法的1個代碼示例,這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚,您的評價將有助於係統推薦出更棒的Python代碼示例。
示例1: test_side_input_visitor
# 需要導入模塊: from apache_beam.runners import DataflowRunner [as 別名]
# 或者: from apache_beam.runners.DataflowRunner import side_input_visitor [as 別名]
def test_side_input_visitor(self):
p = TestPipeline()
pc = p | beam.Create([])
transform = beam.Map(
lambda x, y, z: (x, y, z),
beam.pvalue.AsSingleton(pc),
beam.pvalue.AsMultiMap(pc))
applied_transform = AppliedPTransform(None, transform, "label", [pc])
DataflowRunner.side_input_visitor().visit_transform(applied_transform)
self.assertEqual(2, len(applied_transform.side_inputs))
for side_input in applied_transform.side_inputs:
self.assertEqual(
dataflow_runner._DataflowSideInput.DATAFLOW_MULTIMAP_URN,
side_input._side_input_data().access_pattern)