本文整理汇总了Java中org.apache.hadoop.mapred.InputSplit.write方法的典型用法代码示例。如果您正苦于以下问题：Java InputSplit.write方法的具体用法？Java InputSplit.write怎么用？Java InputSplit.write使用的例子？那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在类org.apache.hadoop.mapred.InputSplit的用法示例。
在下文中一共展示了InputSplit.write方法的3个代码示例，这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞，您的评价将有助于系统推荐出更棒的Java代码示例。
示例1: serializeInputSplit
import org.apache.hadoop.mapred.InputSplit; //导入方法依赖的package包/类
public static String serializeInputSplit(final InputSplit split) throws IOException {
final ByteArrayDataOutput byteArrayOutputStream = ByteStreams.newDataOutput();
split.write(byteArrayOutputStream);
final String encoded = Base64.encodeBase64String(byteArrayOutputStream.toByteArray());
logger.debug("Encoded split string for split {} : {}", split, encoded);
return encoded;
}
示例2: serialize
import org.apache.hadoop.mapred.InputSplit; //导入方法依赖的package包/类
private SerializedInputSplit serialize(InputSplit split) throws IOException{
ByteArrayDataOutput output = ByteStreams.newDataOutput();
split.write(output);
return SerializedInputSplit.newBuilder()
.setInputSplitClass(split.getClass().getName())
.setInputSplit(com.google.protobuf.ByteString.copyFrom(output.toByteArray())).build();
}
示例3: serialize
import org.apache.hadoop.mapred.InputSplit; //导入方法依赖的package包/类
/**
* Serializes each input split to string using Base64 encoding.
*
* @return list of serialized input splits
*/
public List<String> serialize() throws IOException {
List<String> serializedInputSplits = new ArrayList<>();
for (InputSplit inputSplit : inputSplits) {
final ByteArrayDataOutput byteArrayOutputStream = ByteStreams.newDataOutput();
inputSplit.write(byteArrayOutputStream);
final String encoded = Base64.encodeBase64String(byteArrayOutputStream.toByteArray());
logger.debug("Encoded split string for split {} : {}", inputSplit, encoded);
serializedInputSplits.add(encoded);
}
return serializedInputSplits;
}