订房网站开发,科技之星,施工企业资质标准,旅游电商网站排名1.场景分析
数据处理常用hive -e的方式#xff0c;通过脚本操作数仓#xff0c;过程中常常遇到特殊字符的处理#xff0c;如单双引号、反斜杠、换行符等#xff0c;现将特殊字符用法总结使用如下#xff0c;可直接引用#xff0c;避免自行测试的繁琐。
2.特殊字符处理 …
1.场景分析
数据处理常用hive -e的方式通过脚本操作数仓过程中常常遇到特殊字符的处理如单双引号、反斜杠、换行符等现将特殊字符用法总结使用如下可直接引用避免自行测试的繁琐。
2.特殊字符处理
#!/bin/bash
if [ -n $1 ] ;thendo_date$1date1${do_date: 0: 8}date2date -d 1 day $date1 %Y%m%d
elsedate1date -d -1 day %Y%m%ddate2date %Y%m%d
fi
sql
#设置不打印表头
set hive.cli.print.headerfalse;
select\timestamp\,
#双引号中嵌套双引号需要加反斜杠concat([1,\------------------id123212-------------------\\\n ,concat_ws(\\\n,collect_list(content)),NENENE\\\n\]) content
from temp_table;echo $qingsu_data
hive -S -e $sql /data/$date2.jsonl输出内容为
1702006716111,[1,-------------------id123212-------------------\n学生: 老师你好。\n老师: 你说。\n学生: 我自己的人生是一塌糊涂。\n老师: 说说看为什么一塌糊涂\nNENENE\n]假如直接写\n则 #!/bin/bash
sql
select\timestamp\,concat([1,\------------------id123212-------------------\n ,concat_ws(\n,collect_list(content)),NENENE\n\]) content
from temp_table;echo $qingsu_data
hive -S -e $sql /data/$date2.jsonl输出内容为
1702006716111,[1,-------------------id123212-------------------
学生: 老师你好。
老师: 你说。
学生: 我自己的人生是一塌糊涂。
老师: 说说看为什么一塌糊涂
NENENE
]3.总结
()撇号在shell中使用需要用反斜杠转义()双引号中嵌套双引号需要用反斜杠转义()单引号中嵌套双引号需要用反斜杠转义(/)反斜杠作为字符使用中使用需要两个反斜杠转义预留关键字使用两侧需要使用()撇号
