正則表達(dá)式之 Unicode 匹配特殊字符
首先聲明,本文所有的代碼都是在 ES6 下面運(yùn)行,ES5需要修改之后才能運(yùn)行,但是本文沒有涉及到太多的ES6新特性,而且由于v8對(duì)u修飾符不支持,最后的實(shí)現(xiàn)也基本是用ES5的知識(shí)寫的代碼。
最初我只是想記錄下正則表達(dá)式用unicode的方式來匹配特殊字符,寫著寫著發(fā)現(xiàn) v8 對(duì) u 修飾符的不支持,又轉(zhuǎn)而去研究怎么轉(zhuǎn)換字符串到utf-16的格式,在研究怎么轉(zhuǎn)換的過程中發(fā)現(xiàn)ES5的正則對(duì) unicode 編碼單元 > 0x10000 的字符串不支持,再轉(zhuǎn)而去實(shí)現(xiàn)了一遍對(duì)大于 0x10000 的字符串的轉(zhuǎn)換,特此記錄。
之前有遇到過一個(gè)實(shí)用正則表達(dá)式匹配特殊字符的需求,例如一段文本 'ab*cd$你好我也好]\nseg$me*ntfault\nhello,world' ,用戶可以選擇用 * 或者 $ 來分割字符串。
在javascript中, $ 和 * 都是預(yù)定義的特殊字符,不能直接寫在正則表達(dá)式中,而需要轉(zhuǎn)義,寫成 /\$/ 或者 /\*/ 。
我們需要根據(jù)用戶的選擇來寫正則表達(dá)式,封裝成一個(gè)函數(shù)就是:
function reg(input) {
return new RegExp(`\\${input}`)
}
這種寫法初看上去很美好,將字符都轉(zhuǎn)義之后遇到一些特殊的字符可以匹配,然而現(xiàn)實(shí)是殘酷的:當(dāng)用戶輸入的是 n 或者 t 這一類的字符的話,返回的正則表達(dá)式為 /\n/ 或者 /\t/ ,匹配的就是所有的制表符,這就違背了用戶的初衷。
通常有一種寫法就是把所有需要轉(zhuǎn)義的特殊字符都列出來,然后再逐一匹配,這種寫法很耗費(fèi)精力,而且可能因?yàn)闆]有統(tǒng)計(jì)到的特殊字符而出現(xiàn)漏匹配的情況。
這個(gè)時(shí)候unicode就隆重登場了,在 JavaScript 中,我們也可以用unicode來表示一個(gè)字符,例如 'a' 可以寫成'\u{61}', '你' 也可以寫成 '\u{4f60}'。
關(guān)于unicode的介紹大家可以看 Unicode與JavaScript詳解
ES5 中提供了 charCodeAt() 方法來返回指定索引處字符的 Unicode 數(shù)值,但是 Unicode 編碼單元 > 0x10000 的除外, ES2015 中又增加了一個(gè)新的方法 codePointAt() 可以返回大于 0x10000 字符串的數(shù)值。返回的數(shù)值是十進(jìn)制的,此時(shí)我們還需要通過 toString(16) 轉(zhuǎn)成16進(jìn)制。
封裝之后的函數(shù)如下
function toUnicode(s) {
return `\\u{${s.codePointAt().toString(16)}}`
}
toUnicode('$') -> '\u{24}'
重新封裝reg函數(shù)為
function reg(input) {
return new RegExp(`${toUnicode(input)}`, 'u')
}
其實(shí)寫到這里,我希望是對(duì)的,但是很不幸,V8 不支持 RegExp 的 u 修飾符。V8支持的話,寫到這里就應(yīng)該結(jié)束了,沒關(guān)系,這里只是提供一種用unicode的方式來轉(zhuǎn)義特殊字符的思想。
雖然v8不支持u修飾符,作為一個(gè)有追求的碼農(nóng),當(dāng)然不能止步于此,我們也可以使用其他方法繼續(xù)把這個(gè)完善
function toUnicode(s) {
var a = `\\u${utf(s.charCodeAt(0).toString(16))}`
if(s.charCodeAt(1))
a = `${a}\\u${utf(s.charCodeAt(1).toString(16))}`
return a
}
function utf(s) {
return Array.from('00').concat(Array.from(s)).slice(-4).join('')
}
// 這里用var而沒有用let聲明,是因?yàn)檫@些代碼直接復(fù)制到 chrome 的控制臺(tái)下就可以看到執(zhí)行結(jié)果
// 測試一下
// toUnicode('a') --> "\u0061"
// toUnitcode('��') --> "\ud842\udfb7"
function reg(input) {
return new RegExp(`${toUnicode(input)}`)
}
// 再測試一下
reg('$').test('$') --> true
以上內(nèi)容就是腳本之家小編給大家分享的正則表達(dá)式之 Unicode 匹配特殊字符
- 正則表達(dá)式教程之匹配單個(gè)字符詳解
- String字符串匹配javascript 正則表達(dá)式
- C#匹配中文字符串的4種正則表達(dá)式分享
- 正則表達(dá)式匹配不包含某些字符串的技巧
- js 正則表達(dá)式學(xué)習(xí)筆記之匹配字符串
- 正則表達(dá)式 匹配至少有一個(gè)非空白字符并且不超過指定長度
- 匹配任意字符的正則表達(dá)式寫法
- Python 匹配任意字符(包括換行符)的正則表達(dá)式寫法
- 正則表達(dá)式匹配任意字符(包括換行符)的寫法
- 請(qǐng)教一個(gè)正則表達(dá)式,匹配所有Html標(biāo)簽外部的指定字符串
- PHP中正則表達(dá)式對(duì)UNICODE字符碼的匹配方法
- 正則表達(dá)式教程之匹配一組字符詳解
相關(guān)文章
JavaScript正則表達(dá)式驗(yàn)證身份證號(hào)碼是否合法(兩種方法)
正則表達(dá)式(regular expression)是一個(gè)描述字符模式的對(duì)象。下面通過本篇文章給大家介紹js正則表達(dá)式驗(yàn)證身份證號(hào)碼是否合法,需要的朋友可以參考下本篇文章2015-09-09
正則表達(dá)式實(shí)現(xiàn)最小匹配功能的方法
這篇文章主要介紹了正則表達(dá)式實(shí)現(xiàn)最小匹配功能的方法,結(jié)合具體實(shí)例形式分析了正則表達(dá)式最小匹配功能的原理與實(shí)現(xiàn)技巧,需要的朋友可以參考下2017-02-02
Hive中常用正則表達(dá)式的運(yùn)用小結(jié)
在實(shí)際的應(yīng)用中,通常需要在一些復(fù)雜的、沒有規(guī)律的字符串中提取數(shù)據(jù),這時(shí)候就需要用到正則表達(dá)式了,這次講一下hive的正則表達(dá)式,感興趣的朋友跟隨小編一起看看吧2022-08-08
linux下關(guān)于正則表達(dá)式grep的一點(diǎn)總結(jié)
正則表達(dá)式(Regular Expression)是用于描述一組字符串特征的模式,用來匹配特定的字符串。通過特殊字符+普通字符來進(jìn)行模式描述,從而達(dá)到文本匹配目的工具2020-04-04

