V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
gouchaoer
V2EX  ›  Java

hive 里面的字段全部用 string 是否有坑?

  •  
  •   gouchaoer · Dec 7, 2017 · 2705 views
    This topic created in 3076 days ago, the information mentioned may be changed or developed.
    在把 mysql 的数据导入 hive 的时候,我为了方便把 mysql 中所有类型的字段都在 hive 中用 string 表示,没有用 hive 内置的各种类型,现阶段导入和查询都没有什么问题,但是不知道这么做是否会有坑?

    PS:mysql 的 binary 类型在导入 hive 的时候肯定会 base64 编码一下的
    3 replies    2018-08-21 13:22:22 +08:00
    lucyatwex
        1
    lucyatwex  
       Aug 9, 2018
    也取决不定是全用 string 还是映射类型,楼主后来有遇到坑吗?
    gouchaoer
        2
    gouchaoer  
    OP
       Aug 17, 2018
    @lucyatwex 没啥问题。。。话说推荐上 tidb 吧,更省心。。。hive 啥都有些查询出了错你不知道咋回事,tidb 出了问题找 pingcap
    lucyatwex
        3
    lucyatwex  
       Aug 21, 2018
    @gouchaoer 哦哦,get tidb !!!谢谢!!!因为是在 hadoop 生态建数仓,所以用了 hive
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1021 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 18:30 · PVG 02:30 · LAX 11:30 · JFK 14:30
    ♥ Do have faith in what you're doing.