public static String escapeExprSpecialWord(String keyword) {
if (StringUtils.isNotBlank(keyword)) {
String[] fbsArr = { "\\", "$", "(", ")", "*", "+", ".", "[", "]", "?", "^", "{", "}", "|" };
for (String key : fbsArr) {
if (keyword.contains(key)) {
keyword = keyword.replace(key, "\\" + key);
return keyword;
正则需要转义字符:'$', '(', ')', '*', '+', '.', '[', ']', '?', '\\', '^', '{', '}', '|'异常现象: java.util.regex.PatternSyntaxException: Dangling meta. character '*' near index 0解决方法: 对特殊字符加\\转义即可。
day=`date -d "${day1} -$i day" +%Y%m%d`
echo "execute date================================="${day}
hive -e "
set hive.merge.mapfiles = true;
set hive.merge.mapredfi...
正则表达式
1、 掌握
正则表达式
的基本用法
1.2.
正则表达式
简介
1、
正则表达式
是一个强大的字符串
处理
工具,可以对字符串进行、查找、提取、分割、替换等操作。它简单而且实用,是一个用于匹配字符串的模板,我们定义的任意的一个字符串都可以看成是一个
正则表达式
。
2、 String类也提供了几个和
正则表达式
有关的几个特殊方法
1) Boolean matches(String regex):判断该字符串是否匹配指定的
正则表达式
。
2) String replaceAll(String regex,String replacement):返回该字符串中所有匹配
正则表达式
的子串,然后替换成replacement指定的字符串。
3) String replaceFirst(String regex,String replacement);返回该字符串中第一个匹配
正则表达式
的子串替换成replacement 后的新字符串。
4) String[] split(String regex)根据给定
正则表达式
拆分该字符串后得到的字符串数组。
3、 创建
正则表达式
:
正则表达式
中使用的常见字符:
1) \t:制表符(‘\u0009’).
2) \n:换行(‘\u000A’)。
3) \r:回车(‘\u000d’)
4) ……
除此之外
正则表达式
中有一些特殊的字符,这些字符在
正则表达式
中有特殊的用途,如前面介绍的反斜线(\),如果需要匹配这些字符,必须首先将这些字符
转义
,也就是再前面添加一个反斜线(\).
正则表达式
中的
特殊字符
:
1)$:匹配一行的结尾。要匹配$自身用\$
2)^:匹配一行的开头。要匹配^字符本身用\^.
3)():标记子表达式的开始位置和结束位置,要匹配这些字符用\(,\).
4)[]:确定中括号表达式的开始位置和结束位置。
例如:字符集
[abc]:表示内容可能是a、b、c字母中的任意一个。
[^abc]:表示内容不是a、b、c字母的任意一个
[a-zA-Z]:全部的英文字母
[0-9]:全部的数字
5){}:用于标记字表达式的出现额度。
{n}:出现正好n次。
{n,m}:出现n~m次
{n,}:出现n次以上。
6)*:指定前面表达式可以出现零次或多次。
7)+:指定前面表达式可以出现一次或多次。
8)?: 指定前面表达式可以出现零次或1次。
9).:匹配换行符\n之外的任何字符。
10)\:用于
转义
下一个字符
11)|:指定两项之间任选一项,如果要匹配|,请使用\|
上面的
正则表达式
依然匹配单个字符,这是因为还未在
正则表达式
中使用”通配符”,“通配符”是可以匹配多个字符的
特殊字符
。
正则表达式
中”通配符”远远超出了普通通配符的功能,它们被称为预定义字符:例如
1).:可以匹配任何字符
2)\d:匹配数字
3)\D:匹配非数字
4)\s:匹配所有空白字符,包括空格、制表符、回车符、换页符、换行符等
5)\S:匹配所有非空白字符
6)\w:匹配所有单词字符,包括0~9所有数字,26个英文字母和下划线(_)
7)\W:匹配所有非单词字符。
说明:上面的预定义字符:d是digit的意思,代表数字;s是space的意思,代表空白;w是word的意思,代表单词。d、s、w的大写形式恰好匹配与之相反的字符。
例如 :c\wt 可以匹配cat,cbt,c0t,c9t等
\d\d\d-\d\d\d\-\d\d\d可以匹配000-000-000形式的电话号码。
\\d{3}-\\d{3}-\\d{3}
正则表达式
还支持圆括号表达式,圆括号表达式用于将多个表达式组成一个子表达式,圆括号中可以使用或运算符(|),例如
正则表达式
“(public|protected|private)”用于匹配
Java
三个访问控制符其中之一。
4、 使用
正则表达式
一旦程序中定义了
正则表达式
之后,就可以使用
Pat
tern
和Matcher来使用
正则表达式
。
Pat
tern
对象是
正则表达式
编译后在内存中的表示形式,因此,
正则表达式
字符串必须先编译为
Pat
tern
对象,然后再利用该
Pat
tern
对象创建对应的Matcher对象,执行匹配所涉及的状态保留在Matcher对象中,多个Matcher对象可共享同一个
Pat
tern
对象。
例如:典型的调用顺序
//将一个字符串编译成
Pat
tern
对象
Pat
tern
p=
Pat
tern
.complie(“a*b”);
//使用
Pat
tern
对象创建Matcher对象
Matcher m=p.matcher(“aaaab”);
Boolean b=m.matchers();//返回true.
上面的
Pat
tern
对象可以重复使用多次,如果某个
正则表达式
仅需一次使用,可直接使用
Pat
tern
类的静态matches方法,此方法自动把指定字符串编译成匿名的
Pat
tern
对象,并执行匹配。
Boolean b=
Pat
tern
.matches(“a*b”,”aaaab”);//返回true.
Spark sql报错:Caused by:
java
.u
ti
l.regex.
Pat
tern
Syntax
Excep
ti
on: Illegal repe
ti
ti
on near index 1
一、问题描述
Spark执行sql去解析hive中json形式的string,结果如下执行语句
spark.sql("SELECT split(regexp_replace(regexp_replace(data,'\\[\\]',''),'\\}\\,\\{','\\}\\;\\{'),';') from tt").s
默认分类 2009-02-13 10:10 阅读26 评论0 字号: 大大 中中 小小整数或者小数:^[0-9]+\.{0,1}[0-9]{0,2}$只能输入数字:"^[0-9]*$"。只能输入n位的数字:"^\d{n}$"。只能输入至少n位的数字:"^\d{n,}$"。只能输入m~n位的数字:。"^\d{m,n}$"只能输入零和非零开头的数字:"^(0|[1-9][0-9]*)$"。只能输入有两位小数的正实数:"^[0-9]+(.[0-9]{2})?$"。只能输入有1~3位小数的正实数:"^[0-9]+(.[0-9]{1,3})?$"。只能输入非零的正整数:"^\+?[1-9][0-9]*$"。只能输入非零的负整数:"^\-[1-9][]0-9"*$。只能输入长度为3的字符:"^.{3}$"。只能输入由26个英文字母组成的字符串:"^[A-Za-z]+$"。只能输入由26个大写英文字母组成的字符串:"^[A-Z]+$"。只能输入由26个小写英文字母组成的字符串:"^[a-z]+$"。只能输入由数字和26个英文字母组成的字符串:"^[A-Za-z0-9]+$"。只能输入由数字、26个英文字母或者下划线组成的字符串:"^\w+$"。验证用户密码:"^[a-zA-Z]\w{5,17}$"正确格式为:以字母开头,长度在6~18之间,只能包含字符、数字和下划线。验证是否含有^%&',;=?$\"等字符:"[^%&',;=?$\x22]+"。只能输入汉字:"^[\u4e00-\u9fa5]{0,}$"验证Email地址:"^\w+([-+.]\w+)*@\w+([-.]\w+)*\.\w+([-.]\w+)*$"。验证In
tern
etURL:"^http://([\w-]+\.)+[\w-]+(/[\w-./?%&=]*)?$"。验证电话号码:"^(\(\d{3,4}-)|\d{3.4}-)?\d{7,8}$"正确格式为:"XXX-XXXXXXX"、"XXXX-XXXXXXXX"、"XXX-XXXXXXX"、"XXX-XXXXXXXX"、"XXXXXXX"和"XXXXXXXX"。验证身份证号(15位或18位数字):"^\d{15}|\d{18}$"。验证一年的12个月:"^(0?[1-9]|1[0-2])$"正确格式为:"01"~"09"和"1"~"12"。验证一个月的31天:"^((0?[1-9])|((1|2)[0-9])|30|31)$"正确格式为;"01"~"09"和"1"~"31"。匹配中文字符的
正则表达式
: [\u4e00-\u9fa5]
匹配双字节字符(包括汉字在内):[^\x00-\xff]
应用:计算字符串的长度(一个双字节字符长度计2,ASCII字符计1)String.prototype.len=func
ti
on(){return this.replace(/[^\x00-\xff]/g,"aa").length;}
匹配空行的
正则表达式
:\n[\s| ]*\r
匹配html标签的
正则表达式
:<(.*)>(.*)<\/(.*)>|<(.*)\/>
匹配首尾空格的
正则表达式
:(^\s*)|(\s*$)
应用:
java
script中没有像vbscript那样的trim函数,我们就可以利用这个表达式来实现,如下:
String.prototype.trim = func
ti
on(){return this.replace(/(^\s*)|(\s*$)/g, "");}
利用
正则表达式
分解和转换IP地址:
下面是利用
正则表达式
匹配IP地址,并将IP地址转换成对应数值的
Java
script程序:
func
ti
on IP2V(ip){re=/(\d+)\.(\d+)\.(\d+)\.(\d+)/g //匹配IP地址的
正则表达式
if(re.test(ip)){return RegExp.$1*Math.pow(255,3))+RegExp.$2*Math.pow(255,2))+RegExp.$3*255+RegExp.$4*1}else{throw new Error("Not a valid IP address!")}}
不过上面的程序如果不用
正则表达式
,而直接用split函数来分解可能更简单,程序如下:
var ip="10.100.20.168"ip=ip.split(".")alert("IP值是:"+(ip[0]*255*255*255+ip[1]*255*255+ip[2]*255+ip[3]*1))
匹配Email地址的
正则表达式
:\w+([-+.]\w+)*@\w+([-.]\w+)*\.\w+([-.]\w+)*
匹配网址URL的
正则表达式
:http://([\w-]+\.)+[\w-]+(/[\w- ./?%&=]*)?
利用
正则表达式
限制网页表单里的文本框输入内容:
用
正则表达式
限制只能输入中文:onkeyup="value=value.replace(/[^\u4E00-\u9FA5]/g,'')" onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\u4E00-\u9FA5]/g,''))"
用
正则表达式
限制只能输入全角字符: onkeyup="value=value.replace(/[^\uFF00-\uFFFF]/g,'')" onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\uFF00-\uFFFF]/g,''))"
用
正则表达式
限制只能输入数字:onkeyup="value=value.replace(/[^\d]/g,'') "onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\d]/g,''))"
用
正则表达式
限制只能输入数字和英文:onkeyup="value=value.replace(/[\W]/g,'') "onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\d]/g,''))"
<input onkeyup="value=value.replace(/[^\u4E00-\u9FA5\w]/g,'')" onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\u4E00-\u9FA5\w]/g,''))" value="允许下划线,数字字母和汉字">
<script language="
java
script">if (document.layers)//触发键盘事件document.captureEvents(Event.KEYPRESS)
func
ti
on xz(thsv,nob){if(nob=="2"){window.clipboardData.setData("text","")alert("避免非法字符输入,请勿复制字符");return false;}if (event.keyCode!=8 && event.keyCode!=16 && event.keyCode!=37 && event.keyCode!=38 && event.keyCode!=39 && event.keyCode!=40){thsvv=thsv.value;//输入的值thsvs=thsvv.substring(thsvv.length-1);//输入的最后一个字符//thsvss=thsvv.substring(0,thsvv.length-1);//去掉最后一个错误字符if (!thsvs.replace(/[^\u4E00-\u9FA5\w]/g,'') || event.keyCode==189){//
正则
除去符号和下划线 keythsv.value='请勿输入非法符号 ['+thsvs+']';alert('请勿输入非法符号 ['+thsvs+']');thsv.value="";return false;}}}
</script>
<input onkeyup="xz(this,1)" onPaste="xz(this,2)" value="">允许数字字母和汉字
<script language="
java
script"><!--func
ti
on MaxLength(field,maxlimit){var j = field.value.replace(/[^\x00-\xff]/g,"**").length;//alert(j);var tempString=field.value;var tt="";if(j > maxlimit){for(var i=0;i<maxlimit;i++){if(tt.replace(/[^\x00-\xff]/g,"**").length < maxlimit)tt = tempString.substr(0,i+1);elsebreak;}if(tt.replace(/[^\x00-\xff]/g,"**").length > maxlimit)tt=tt.substr(0,tt.length-1);field.value = tt;}else{;}}</script>
单行文本框控制<br /><INPUT type="text" id="Text1" name="Text1" onpropertychange="MaxLength(this, 5)"><br />多行文本框控制:<br /><TEXTAREA rows="14"cols="39" id="Textarea1" name="Textarea1" onpropertychange="MaxLength(this, 15)"></TEXTAREA><br />
控制表单内容只能输入数字,中文....<script>func
ti
on test() {if(document.a.b.value.length>50){alert("不能超过50个字符!");document.a.b.focus();return false;}}</script><form name=a onsubmit="return test()"><textarea name="b" cols="40" wrap="VIRTUAL" rows="6"></textarea><input type="submit" name="Submit" value="check"></form>
只能是汉字<input onkeyup="value=value.replace(/[^\u4E00-\u9FA5]/g,'')">
只能是英文字符<script language=
java
script>func
ti
on onlyEng(){if(!(event.keyCode>=65&&event.keyCode<=90)) event.returnValue=false;}</script>
<input onkeydown="onlyEng();"><input name="coname" type="text" size="50" maxlength="35" class="input2" onkeyup="value=value.replace(/[\W]/g,'') "onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\d]/g,''))">只能是数字<script language=
java
script>func
ti
on onlyNum(){if(!((event.keyCode>=48&&event.keyCode<=57)||(event.keyCode>=96&&event.keyCode<=105)))//考虑小键盘上的数字键 event.returnValue=false;}</script>
<input onkeydown="onlyNum();">
只能是英文字符和数字<input onkeyup="value=value.replace(/[\W]/g,'') "onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\d]/g,''))">
验证为email格式<SCRIPT LANGUAGE=
Java
script RUNAT=Server>func
ti
on isEmail(strEmail) {if (strEmail.search(/^\w+((-\w+)|(\.\w+))*\@[A-Za-z0-9]+((\.|-)[A-Za-z0-9]+)*\.[A-Za-z0-9]+$/) != -1)return true;elsealert("oh");}</SCRIPT><input type=text onblur=isEmail(this.value)>
屏蔽关键字(sex , fuck) - 已修改<script language="
Java
Script1.2">func
ti
on test() {if((a.b.value.indexOf ("sex") == 0)||(a.b.value.indexOf ("fuck") == 0)){ alert("五讲四美三热爱"); a.b.focus(); return false;}}</script><form name=a onsubmit="return test()"><input type=text name=b><input type="submit" name="Submit" value="check"></form>
限制文本框里只能输入数字<input onkeyup="if(event.keyCode !=37 && event.keyCode != 39) value=value.replace(/\D/g,'');"onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/\D/g,''))">
<PIXTEL_MMI_EBOOK_2005>2 </PIXTEL_MMI_EBOOK_2005>
JAVA
正则表达式
语法(转)
正则表达式
语法
正则表达式
是一种文本模式,包括普通字符(例如,a 到 z 之间的字母)和
特殊字符
(称为“元字符”)。模式描述在搜索文本时要匹配的一个或多个字符串。
正则表达式
示例表达式 匹配 /^\s*$/匹配空行。/\d{2}-\d{5}/验证由两位数字、一个连字符再加 5 位数字组成的 ID 号。/<\s*(\S+)(\s[^>]*)?>[\s\S]*<\s*\/\1\s*>/匹配 HTML 标记。下表包含了元字符的完整列表以及它们在
正则表达式
上下文中的行为:字符 说明 \将下一字符标记为
特殊字符
、文本、反向引用或八进制
转义
符。例如,“n”匹配字符“n”。“\n”匹配换行符。序列“\\”匹配“\”,“\(”匹配“(”。^匹配输入字符串开始的位置。如果设置了 RegExp 对象的 Mul
ti
line 属性,^ 还会与“\n”或“\r”之后的位置匹配。$匹配输入字符串结尾的位置。如果设置了 RegExp 对象的 Mul
ti
line 属性,$ 还会与“\n”或“\r”之前的位置匹配。*零次或多次匹配前面的字符或子表达式。例如,zo* 匹配“z”和“zoo”。* 等效于 {0,}。+一次或多次匹配前面的字符或子表达式。例如,“zo+”与“zo”和“zoo”匹配,但与“z”不匹配。+ 等效于 {1,}。?零次或一次匹配前面的字符或子表达式。例如,“do(es)?”匹配“do”或“does”中的“do”。? 等效于 {0,1}。{n}n 是非负整数。正好匹配 n 次。例如,“o{2}”与“Bob”中的“o”不匹配,但与“food”中的两个“o”匹配。{n,}n 是非负整数。至少匹配 n 次。例如,“o{2,}”不匹配“Bob”中的“o”,而匹配“foooood”中的所有 o。“o{1,}”等效于“o+”。“o{0,}”等效于“o*”。{n,m}M 和 n 是非负整数,其中 n <= m。匹配至少 n 次,至多 m 次。例如,“o{1,3}”匹配“fooooood”中的头三个 o。'o{0,1}' 等效于 'o?'。注意:您不能将空格插入逗号和数字之间。?当此字符紧随任何其他限定符(*、+、?、{n}、{n,}、{n,m})之后时,匹配模式是“非贪心的”。“非贪心的”模式匹配搜索到的、尽可能短的字符串,而默认的“贪心的”模式匹配搜索到的、尽可能长的字符串。例如,在字符串“oooo”中,“o+?”只匹配单个“o”,而“o+”匹配所有“o”。.匹配除“\n”之外的任何单个字符。若要匹配包括“\n”在内的任意字符,请使用诸如“[\s\S]”之类的模式。(
pat
tern
)匹配
pat
tern
并捕获该匹配的子表达式。可以使用 $0…$9 属性从结果“匹配”集合中检索捕获的匹配。若要匹配括号字符 ( ),请使用“\(”或者“\)”。(?:
pat
tern
)匹配
pat
tern
但不捕获该匹配的子表达式,即它是一个非捕获匹配,不存储供以后使用的匹配。这对于用“or”字符 (|) 组合模式部件的情况很有用。例如,'industr(?:y|ies) 是比 'industry|industries' 更经济的表达式。(?=
pat
tern
)执行正向预测先行搜索的子表达式,该表达式匹配处于匹配
pat
tern
的字符串的起始点的字符串。它是一个非捕获匹配,即不能捕获供以后使用的匹配。例如,'Windows (?=95|98|NT|2000)' 匹配“Windows 2000”中的“Windows”,但不匹配“Windows 3.1”中的“Windows”。预测先行不占用字符,即发生匹配后,下一匹配的搜索紧随上一匹配之后,而不是在组成预测先行的字符后。(?!
pat
tern
)执行反向预测先行搜索的子表达式,该表达式匹配不处于匹配
pat
tern
的字符串的起始点的搜索字符串。它是一个非捕获匹配,即不能捕获供以后使用的匹配。例如,'Windows (?!95|98|NT|2000)' 匹配“Windows 3.1”中的 “Windows”,但不匹配“Windows 2000”中的“Windows”。预测先行不占用字符,即发生匹配后,下一匹配的搜索紧随上一匹配之后,而不是在组成预测先行的字符后。x|y匹配 x 或 y。例如,'z|food' 匹配“z”或“food”。'(z|f)ood' 匹配“zood”或“food”。[xyz]字符集。匹配包含的任一字符。例如,“[abc]”匹配“plain”中的“a”。[^xyz]反向字符集。匹配未包含的任何字符。例如,“[^abc]”匹配“plain”中的“p”。[a-z]字符范围。匹配指定范围内的任何字符。例如,“[a-z]”匹配“a”到“z”范围内的任何小写字母。[^a-z]反向范围字符。匹配不在指定的范围内的任何字符。例如,“[^a-z]”匹配任何不在“a”到“z”范围内的任何字符。\b匹配一个字边界,即字与空格间的位置。例如,“er\b”匹配“never”中的“er”,但不匹配“verb”中的“er”。\B非字边界匹配。“er\B”匹配“verb”中的“er”,但不匹配“never”中的“er”。\cx匹配 x 指示的控制字符。例如,\cM 匹配 Control-M 或回车符。x 的值必须在 A-Z 或 a-z 之间。如果不是这样,则假定 c 就是“c”字符本身。\d数字字符匹配。等效于 [0-9]。\D非数字字符匹配。等效于 [^0-9]。\f换页符匹配。等效于 \x0c 和 \cL。\n换行符匹配。等效于 \x0a 和 \cJ。\r匹配一个回车符。等效于 \x0d 和 \cM。\s匹配任何空白字符,包括空格、制表符、换页符等。与 [ \f\n\r\t\v] 等效。\S匹配任何非空白字符。与 [^ \f\n\r\t\v] 等效。\t制表符匹配。与 \x09 和 \cI 等效。\v垂直制表符匹配。与 \x0b 和 \cK 等效。\w匹配任何字类字符,包括下划线。与“[A-Za-z0-9_]”等效。\W与任何非单词字符匹配。与“[^A-Za-z0-9_]”等效。\xn匹配 n,此处的 n 是一个十六进制
转义
码。十六进制
转义
码必须正好是两位数长。例如,“\x41”匹配“A”。“\x041”与“\x04”&“1”等效。允许在
正则表达式
中使用 ASCII 代码。\num匹配 num,此处的 num 是一个正整数。到捕获匹配的反向引用。例如,“(.)\1”匹配两个连续的相同字符。\n标识一个八进制
转义
码或反向引用。如果 \n 前面至少有 n 个捕获子表达式,那么 n 是反向引用。否则,如果 n 是八进制数 (0-7),那么 n 是八进制
转义
码。\nm标识一个八进制
转义
码或反向引用。如果 \nm 前面至少有 nm 个捕获子表达式,那么 nm 是反向引用。如果 \nm 前面至少有 n 个捕获,则 n 是反向引用,后面跟有字符 m。如果两种前面的情况都不存在,则 \nm 匹配八进制值 nm,其中 n 和 m 是八进制数字 (0-7)。\nml当 n 是八进制数 (0-3),m 和 l 是八进制数 (0-7) 时,匹配八进制
转义
码 nml。\un匹配 n,其中 n 是以四位十六进制数表示的 Unicode 字符。例如,\u00A9 匹配版权符号 (?)。
主要应用对象是文本,因此它在各种文本编辑器场合都有应用,小到著名编辑器EditPlus,大到Microsoft Word、Visual Studio等大型编辑器,都可以使用