本文整理汇总了Java中org.apache.hadoop.streaming.StreamKeyValUtil类的典型用法代码示例。如果您正苦于以下问题:Java StreamKeyValUtil类的具体用法?Java StreamKeyValUtil怎么用?Java StreamKeyValUtil使用的例子?那么, 这里精选的类代码示例或许可以为您提供帮助。
StreamKeyValUtil类属于org.apache.hadoop.streaming包,在下文中一共展示了StreamKeyValUtil类的1个代码示例,这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞,您的评价将有助于系统推荐出更棒的Java代码示例。
示例1: splitKeyVal
import org.apache.hadoop.streaming.StreamKeyValUtil; //导入依赖的package包/类
private void splitKeyVal(byte[] line, int length, Text key, Text val)
throws IOException {
// Need to find numKeyFields separators
int pos = UTF8ByteArrayUtils.findBytes(line, 0, length, separator);
for(int k=1; k<numKeyFields && pos!=-1; k++) {
pos = UTF8ByteArrayUtils.findBytes(line, pos + separator.length,
length, separator);
}
try {
if (pos == -1) {
key.set(line, 0, length);
val.set("");
} else {
StreamKeyValUtil.splitKeyVal(line, 0, length, key, val, pos,
separator.length);
}
} catch (CharacterCodingException e) {
throw new IOException(StringUtils.stringifyException(e));
}
}