亚洲精品久久久中文字幕-亚洲精品久久片久久-亚洲精品久久青草-亚洲精品久久婷婷爱久久婷婷-亚洲精品久久午夜香蕉

您的位置:首頁技術文章
文章詳情頁

java實現往hive 的map類型字段寫數據

瀏覽:4日期:2022-08-08 18:06:20
往hive 的map類型字段寫數據

該表的該字段類型是map<string,string>

對應類的該屬性的類型需要定義成String,不可定義成Map<String,String> !!

方法1:

建表語句定義map的分隔符:

row format delimited fields terminated by ’|’ collection items terminated by ’,’ map keys terminated by ’:’ NULL DEFINED AS ’’

然后在java中封裝好map后,不可直接把map.toString()的字符串寫入字段(會有“=”,不能正確組成JSON格式的內容),也不可序列化為JSON格式的字符串后寫入字段(會加很多“”)!需要自己定義toString的方法:

public static String insertToMap(Map<String, String> map) {StringBuilder sb = new StringBuilder();Set<String> set = map.keySet();for (String s : set) { sb.append(s).append(':').append(StringUtils.isBlank(map.get(s)) ? 'NULL' : map.get(s)).append(',');}String str = sb.toString();return str.substring(0, str.length() - 1); }

字符串是不帶雙引號和兩端花括號的字符串,這樣插入到字段時,hive會自動為key和value都添加雙引號,也會在兩端添加花括號!(為啥為空時需要把value設置成NULL?如果為空不寫時,怕hive處理時出錯,可能會處理成帶四個雙引號的NULL,所以手動指定空為'NULL'字符串)

方法2:

建表語句不用定義map的分隔符:

然后在java中封裝好map后,不可直接把map.toString()的字符串寫入字段,也不可序列化為JSON格式的字符串后寫入字段!需要自己定義toString的方法:

public static String insertToMap(Map<String, String> map) {StringBuilder sb = new StringBuilder();Set<String> set = map.keySet();for (String s : set) { sb.append(s).append('003').append(StringUtils.isBlank(map.get(s)) ? 'NULL' : map.get(s)).append('002');}String str = sb.toString();return str.substring(0, str.length() - 1); }

得到的則是正確的字段內容!

hive中默認是用“003”分隔key與value,用“002”分隔兩個鍵值對!

以上是今天嘗試好幾種方法整理后的結論!

hive-map類型字段的定義與插入

map類型定義了一種kv結構,在hive中經常使用。

如何定義map類型呢?

create table employee(id string, perf map<string, int>) ROW FORMAT DELIMITEDFIELDS TERMINATED BY ’t’ COLLECTION ITEMS TERMINATED BY ’,’ MAP KEYS TERMINATED BY ’:’;

其中fields是字段分隔符,collection是每個kv對的分隔符,map keys是k與v的分隔符。

導入數據時,只需要按對應分隔符處理好數據即可。

以上為個人經驗,希望能給大家一個參考,也希望大家多多支持好吧啦網。

標簽: Java
相關文章:
主站蜘蛛池模板: 国产欧美日韩视频在线观看一区二区 | 国产精品久久永久免费 | 日本高清二区 | 国产精品免费久久久免费 | 国产91高清在线 | 黄色免费在线看 | 国产经典一区 | 国产精品第三页在线看 | 欧美成人精品第一区二区三区 | 中国大陆一级毛片 免费 | 国产综合成人亚洲区 | 成人影院久久久久久影院 | 久久精品视频99精品视频150 | 国产精品99一区二区三区 | 亚洲无线一二三四区 | 欧美做a一级视频免费观看 欧美做a欧美 | 特黄日韩免费一区二区三区 | 这里只有精品国产 | 一级片免费在线 | 色婷婷狠狠五月综合天色拍 | 欧美综合中文字幕久久 | 久久久久久久久久免免费精品 | 欧美日韩中文国产一区 | 香蕉乱码成人久久天堂爱免费 | 热99精品只有里视频最新 | 欧美3p在线观看 | 黄片毛片一级片 | 麻豆短视频传媒网站怎么找 | 偷拍久久网 | 欧美在线视频网站 | 国产高清区 | 久久免费精品视频在线观看 | 国产精品夜夜春夜夜爽久久 | 曰本在线网 | www.妞干网 | 91久久网 | 日本无卡αv免费视频 | 午夜看片未满十八勿进 | 麻豆精品视频 在线视频 | 97色老99久久九九爱精品 | 欧美国产一区二区三区 |