HiveSQL SparkSQL 正则表达式

这里对sql常用的一些正则匹配作一些匹配,都是来源别人博客,此处稍作整理和总结。mark一下

1、sql中有like 和 rlike,具体区别

like:

%:匹配零个及多个任意字符

 _:与任意单字符匹配

 []:匹配一个范围

 [^]:排除一个范围

 ESCAPE  关键字定义转义符  WHERE   ColumnA   LIKE   '%5/%%'   ESCAPE   '/' 

like不是正则,而是通配符

rlike:

rlike是正则,正则的写法与java一样。'\'需要使用'\\',例如'\w'需要使用'\\w'

A rlike '\\d+' 匹配一个或多个数字, not A rlike '\\d+' 匹配非数字

直接在条件里面写正则表达式

2、hive sql 中 正则匹配函数

regexp 功能和 rlike类似


select count(*) from olap_b_dw_hotelorder_f where create_date_wid  regexp '\\d{8}'
select count(*) from olap_b_dw_hotelorder_f where create_date_wid  rlike '\\d{8}'

regexp_extract(string subject, string pattern, int index)   将字符串subject按照pattern正则表达式的规则拆分,返回index指定的字符

select regexp_extract('IloveYou','(I)(.*?)(You)',1) from test1 limit 1  // 1 匹配 I,2匹配 love,3匹配 You

regexp_replace(string A, string B, string C)  将字符串A中的符合Java正则表达式B的部分替换为C  

select regexp_replace("IloveYou","You","") from test1  // Ilove

这里几个函数类似oracle的5个正则函数,具体可参考oracle的正则匹配函数
---------------------------------------------------------------------------------------------------------------------------------------------

1.regexp
语法: A REGEXP B 
操作类型: strings 
描述: 功能与RLIKE相同

select count(*) from olap_b_dw_hotelorder_f where create_date_wid not regexp '\\d{8}'
1
与下面查询的效果是等效的:

select count(*) from olap_b_dw_hotelorder_f where create_date_wid not rlike '\\d{8}';
1
匹配中文:

 self.reg = ‘regexp "[\u4e00-\u9fa5]"’

关于Hive正则匹配中文字符串的问题

首先,中文字符集为 '^[\\4e00-\\u9fa5]$'

1.如果直接在Hive命令行中使用, 则直接使用 ‘^[\\u4e00-\\u9fa5]$’ 进行匹配

2.如果在终端调用,则需叫上转义符,如

hive -e "select '中国'  rlike ‘^[\\\u4e00-\\\u9fa5]$’"
name rlike '^[\\u4e00-\\u9fa5]+$'  

猜你喜欢

转载自blog.csdn.net/ytp552200ytp/article/details/86637153
今日推荐