`
kavy
  • 浏览: 866806 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

Spark SQL数据类型

阅读更多

Spark SQL数据类型

数字类型

ByteType:代表一个字节的整数。范围是-128到127

ShortType:代表两个字节的整数。范围是-32768到32767

IntegerType:代表4个字节的整数。范围是-2147483648到2147483647

LongType:代表8个字节的整数。范围是-9223372036854775808到9223372036854775807

FloatType:代表4字节的单精度浮点数

DoubleType:代表8字节的双精度浮点数

DecimalType:代表任意精度的10进制数据。通过内部的java.math.BigDecimal支持。BigDecimal由一个任意精度的整型非标度值和一个32位整数组成

StringType:代表一个字符串值

BinaryType:代表一个byte序列值

BooleanType:代表boolean值

Datetime类型

TimestampType:代表包含字段年,月,日,时,分,秒的值

DateType:代表包含字段年,月,日的值

复杂类型

ArrayType(elementType, containsNull):代表由elementType类型元素组成的序列值。containsNull用来指明ArrayType中的值是否有null值

MapType(keyType, valueType, valueContainsNull):表示包括一组键 - 值对的值。通过keyType表示key数据的类型,通过valueType表示value数据的类型。valueContainsNull用来指明MapType中的值是否有null值

StructType(fields):表示一个拥有StructFields (fields)序列结构的值

StructField(name, dataType, nullable):代表StructType中的一个字段,字段的名字通过name指定,dataType指定field的数据类型,nullable表示字段的值是否有null值。

————————————————

版权声明:本文为CSDN博主「会spark的篮球少年」的原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接及本声明。

原文链接:https://blog.csdn.net/qq_15230053/article/details/84769767

分享到:
评论

相关推荐

Global site tag (gtag.js) - Google Analytics