当前位置: 首页>>代码示例>>Scala>>正文


Scala serdeConstants类代码示例

本文整理汇总了Scala中org.apache.hadoop.hive.serde.serdeConstants的典型用法代码示例。如果您正苦于以下问题:Scala serdeConstants类的具体用法?Scala serdeConstants怎么用?Scala serdeConstants使用的例子?那么恭喜您, 这里精选的类代码示例或许可以为您提供帮助。


在下文中一共展示了serdeConstants类的1个代码示例,这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞,您的评价将有助于系统推荐出更棒的Scala代码示例。

示例1: StructTypeToHiveConverter

//设置package包名称以及导入依赖的类
package sativum

import org.apache.hadoop.hive.metastore.api.FieldSchema
import org.apache.hadoop.hive.serde.serdeConstants
import org.apache.spark.sql.types._

object StructTypeToHiveConverter {
  def convert(s : StructType): Array[(String, String)] = {
    s.fields.map{
      f => (f.name,
        convertDataType(f.dataType)
        )
    }
  }

  def convertDataType(dt: DataType): String = {
    dt match {
      case d: IntegerType => serdeConstants.INT_TYPE_NAME
      case d: LongType => serdeConstants.BIGINT_TYPE_NAME
      case d: StringType => serdeConstants.STRING_TYPE_NAME
      case d: DoubleType => serdeConstants.DOUBLE_TYPE_NAME
      case d: StructType => serdeConstants.STRUCT_TYPE_NAME +
        "<" + convert(d).map(e => e._1 + ":" + e._2 ).mkString(",") + ">"
      case d: ArrayType => serdeConstants.LIST_TYPE_NAME + "<" + convertDataType(d.elementType) + ">"
    }
  }
  def convertToHive(s: StructType) = {
    convert(s).map(f => new FieldSchema(f._1, f._2, "")).toList
  }
} 
开发者ID:mindfulmachines,项目名称:sativum,代码行数:31,代码来源:StructTypeToHiveConverter.scala


注:本文中的org.apache.hadoop.hive.serde.serdeConstants类示例由纯净天空整理自Github/MSDocs等开源代码及文档管理平台,相关代码片段筛选自各路编程大神贡献的开源项目,源码版权归原作者所有,传播和使用请参考对应项目的License;未经允许,请勿转载。