北风网php笔记正则表达式,PHP中使用正则表达式提取中文实现笔记
最近老板叫做一個(gè)數(shù)據(jù)查重的小練習(xí),涉及從一個(gè)包含中文字段的文件中提取出其中的中文字段并存儲(chǔ),使用php開發(fā)。中間涉及到php正則表達(dá)式中文匹配的問題,網(wǎng)上搜羅一大片,但是也很亂沒有一個(gè)準(zhǔn)信兒,經(jīng)過(guò)自己的代碼的修改和檢驗(yàn),先將extract函數(shù)寫下。
首先要注意到的是,雙字節(jié)字符的編碼問題,這里我們以后還可能會(huì)遇到像韓文、日文等編碼問題,與中文理解上是一個(gè)意思。
1. GBK (GB2312/GB18030)
復(fù)制代碼 代碼如下:
\x00-\xff GBK雙字節(jié)編碼范圍
\x20-\x7f ASCII
\xa1-\xff 中文 gb2312
\x80-\xff 中文 gbk
2. UTF-8 (Unicode)
復(fù)制代碼 代碼如下:
\u4e00-\u9fa5 (中文)
\x3130-\x318F (韓文
\xAC00-\xD7A3 (韓文)
\u0800-\u4e00 (日文)
在Notepad++下面,我們可以首先進(jìn)行測(cè)試我們的正則書寫的錯(cuò)誤與否。第一個(gè)表達(dá)式我是使用[\u4e00-\u9fa5]+來(lái)檢驗(yàn)的,+號(hào)表示不止一個(gè)
匹配符。結(jié)果與預(yù)期相同,那么,是否在腳本中就可以使用這個(gè)正則了呢?
我們測(cè)試一下,我們使用preg_match_all(‘/[\u4e00-\u9fa5]+/', $subject,$matches)調(diào)用,然后你卻看到了這么一個(gè)結(jié)果:Compilation failed: PCRE does not support \L, \l, \N{name}, \U, or \u at offset 2。。。。是不是很頭大??這究竟是什么原因?
查閱了很多資料后發(fā)現(xiàn),u (PCRE_UTF8),就是上面的PCRE,這是是一個(gè)Perl庫(kù),包括 perl 兼容的正規(guī)表達(dá)式庫(kù)。此修正符啟用了一個(gè) PCRE 中與 Perl 不兼容的額外功能。模式字符串被當(dāng)成 UTF-8。本修正符在 Unix 下自 PHP 4.1.0 起可用,在 win32 下自 PHP 4.2.3 起可用。而php正則表達(dá)式對(duì)于十六進(jìn)制數(shù)據(jù)的表達(dá)方式上也有所不同,在php中,是用\x表示十六進(jìn)制數(shù)據(jù)的。下面我們就將代碼優(yōu)化一下,檢測(cè)函數(shù)變?yōu)?#xff1a;
復(fù)制代碼 代碼如下:
class storeDataAdapter extends Store{
private $dsData;
/**
* 數(shù)據(jù)轉(zhuǎn)換函數(shù),調(diào)用preg_match_all根據(jù)$pattern正則來(lái)進(jìn)行數(shù)值匹配,并將返回的結(jié)果以數(shù)組形式存儲(chǔ)在$matches中,
* $matches[0]將包含與整個(gè)模式匹配的文本,$matches[1] 將包含與第一個(gè)捕獲的括號(hào)中的子模式所匹配的文本,以此類推
* @see Store::data_convert()
*/
public function data_convert($pattern,$subject) {
$matches=array();
if (preg_match_all($pattern, $subject,$matches)){
return $matches[0];
}else
{
return null;
}
}
}
調(diào)用的時(shí)候變?yōu)?#xff1a;
復(fù)制代碼 代碼如下:
$store=new storeDataAdapter($txtContent);
$match=array();
$dsName=$store->data_convert(‘/[\x7f-\xff]+/',$txtContent);
foreach ($dsName as $val){
echo $val."<br>";
}
輸入文件為:
,下面是提取出中文之后的輸出文件內(nèi)容:
,符合預(yù)期需求。
總結(jié)
以上是生活随笔為你收集整理的北风网php笔记正则表达式,PHP中使用正则表达式提取中文实现笔记的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 大黄蜂商城是什么
- 下一篇: php substr的用法,PHP中su