本文整理匯總了Java中org.apache.hadoop.mapred.InputSplit.write方法的典型用法代碼示例。如果您正苦於以下問題：Java InputSplit.write方法的具體用法？Java InputSplit.write怎麽用？Java InputSplit.write使用的例子？那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在類org.apache.hadoop.mapred.InputSplit的用法示例。
在下文中一共展示了InputSplit.write方法的3個代碼示例，這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚，您的評價將有助於係統推薦出更棒的Java代碼示例。
示例1: serializeInputSplit
import org.apache.hadoop.mapred.InputSplit; //導入方法依賴的package包/類
public static String serializeInputSplit(final InputSplit split) throws IOException {
final ByteArrayDataOutput byteArrayOutputStream = ByteStreams.newDataOutput();
split.write(byteArrayOutputStream);
final String encoded = Base64.encodeBase64String(byteArrayOutputStream.toByteArray());
logger.debug("Encoded split string for split {} : {}", split, encoded);
return encoded;
}
示例2: serialize
import org.apache.hadoop.mapred.InputSplit; //導入方法依賴的package包/類
private SerializedInputSplit serialize(InputSplit split) throws IOException{
ByteArrayDataOutput output = ByteStreams.newDataOutput();
split.write(output);
return SerializedInputSplit.newBuilder()
.setInputSplitClass(split.getClass().getName())
.setInputSplit(com.google.protobuf.ByteString.copyFrom(output.toByteArray())).build();
}
示例3: serialize
import org.apache.hadoop.mapred.InputSplit; //導入方法依賴的package包/類
/**
* Serializes each input split to string using Base64 encoding.
*
* @return list of serialized input splits
*/
public List<String> serialize() throws IOException {
List<String> serializedInputSplits = new ArrayList<>();
for (InputSplit inputSplit : inputSplits) {
final ByteArrayDataOutput byteArrayOutputStream = ByteStreams.newDataOutput();
inputSplit.write(byteArrayOutputStream);
final String encoded = Base64.encodeBase64String(byteArrayOutputStream.toByteArray());
logger.debug("Encoded split string for split {} : {}", inputSplit, encoded);
serializedInputSplits.add(encoded);
}
return serializedInputSplits;
}