php使用iconv中文截?cái)鄦?wèn)題的解決方法
本文實(shí)例講述了php使用iconv中文截?cái)鄦?wèn)題的解決方法。分享給大家供大家參考。具體分析如下:
今天做了一個(gè)采集程序,原理很簡(jiǎn)單,使用curl方法把對(duì)方頁(yè)面的html獲取分析,然后正則提取需要的數(shù)據(jù)并保存在數(shù)據(jù)庫(kù)。
由于對(duì)方頁(yè)面是GB2312編碼,而本地使用的是UTF-8編碼。因此在采集后需要進(jìn)行編碼轉(zhuǎn)換。
使用了iconv方法進(jìn)行編碼轉(zhuǎn)換
iconv — 字符串按要求的字符編碼來(lái)轉(zhuǎn)換
string iconv ( string $in_charset , string $out_charset , string $str )
將字符串 str 從 in_charset 轉(zhuǎn)換編碼到 out_charset 。
轉(zhuǎn)換的方法很簡(jiǎn)單,直接使用iconv方法就可以了
<?php
$content = iconv('GB2312', 'UTF-8', $content); //$content為采集到的內(nèi)容
?>
試驗(yàn)了幾個(gè)頁(yè)面,都能正常采集。但在之后的采集中,有幾個(gè)頁(yè)面采集不完整。
一開(kāi)始考慮是否正則有錯(cuò),檢查后排除此問(wèn)題。經(jīng)過(guò)排查,發(fā)現(xiàn)經(jīng)過(guò)iconv轉(zhuǎn)碼后的內(nèi)容比采集的內(nèi)容少了一大段。
查看apache log,看到提示:Notice: iconv(): Detected an illegal character in input string。
翻查手冊(cè),看到以下說(shuō)明
如果你在 out_charset 后添加了字符串 //TRANSLIT,將啟用轉(zhuǎn)寫(xiě)(transliteration)功能。這個(gè)意思是,當(dāng)一個(gè)字符不能被目標(biāo)字符集所表示時(shí),它可以通過(guò)一個(gè)或多個(gè)形似的字符來(lái)近似表達(dá)。
如果你添加了字符串 //IGNORE,不能以目標(biāo)字符集表達(dá)的字符將被默默丟棄。 否則, str 從第一個(gè)無(wú)效字符開(kāi)始截?cái)嗖?dǎo)致一個(gè) E_NOTICE 。
原來(lái)iconv遇到不能識(shí)別的內(nèi)容,會(huì)從第一個(gè)不能識(shí)別的字符開(kāi)始截?cái)?,并生成一個(gè)E_NOTICE。因此后邊的內(nèi)容被丟棄了。
而在輸出字符集后加上//IGNORE則只丟棄不能識(shí)別的內(nèi)容,而不會(huì)截?cái)嗪蛠G棄后面的內(nèi)容。
修改程序后一切正常
<?php
$content = iconv('GB2312','UTF-8//IGNORE',$content);//$content為采集到的內(nèi)容
?>
Tips:使用iconv時(shí),如果要使用UTF-8編碼的,請(qǐng)使用UTF-8而不要使用UTF8,因?yàn)閁TF8有些服務(wù)器會(huì)有問(wèn)題。
希望本文所述對(duì)大家的php程序設(shè)計(jì)有所幫助。
- C# double和decimal數(shù)據(jù)類(lèi)型以截?cái)嗟姆绞奖A糁付ǖ男?shù)位數(shù)
- MSSQL 將截?cái)嘧址蚨M(jìn)制數(shù)據(jù)問(wèn)題的解決方法
- oracle中截?cái)啾淼氖褂媒榻B
- js中根據(jù)字?jǐn)?shù)截取字符串,不能截?cái)鄒rl
- c#完美截?cái)嘧址a(中文+非中文)
- PHP UTF8中文字符截?cái)嗪瘮?shù)代碼
- PHP在字符斷點(diǎn)處截?cái)辔淖值膶?shí)現(xiàn)代碼
- PHP連接MSSQL時(shí)nvarchar字段長(zhǎng)度被截?cái)酁?55的解決方法
- PHP截?cái)鄻?biāo)題且兼容utf8和gb2312編碼
- js實(shí)現(xiàn)文字截?cái)喙δ?/a>
相關(guān)文章
PHP FOR MYSQL 代碼生成助手(根據(jù)Mysql里的字段自動(dòng)生成類(lèi)文件的)
根據(jù) Mysql里的字段自動(dòng)生成類(lèi)文件的實(shí)現(xiàn)代碼,學(xué)習(xí)php的朋友可以參考下。2011-07-07
PHP-Fcgi下PHP的執(zhí)行時(shí)間設(shè)置方法
昨天,一個(gè)程序需要導(dǎo)出500條數(shù)據(jù),結(jié)果發(fā)現(xiàn)到150條是,Nginx報(bào)出504 Gateway Timeout錯(cuò)誤,原來(lái)PHP-Fcgi下的設(shè)置執(zhí)行時(shí)間與isapi的不同2013-08-08
PHP學(xué)習(xí)筆記(三):數(shù)據(jù)類(lèi)型轉(zhuǎn)換與常量介紹
這篇文章主要介紹了PHP學(xué)習(xí)筆記(三):數(shù)據(jù)類(lèi)型轉(zhuǎn)換與常量介紹,本文講解了PHP數(shù)據(jù)類(lèi)型相互轉(zhuǎn)換、常量的聲明與使用等內(nèi)容,需要的朋友可以參考下2015-04-04
php實(shí)現(xiàn)簡(jiǎn)單四則運(yùn)算器
這篇文章主要為大家詳細(xì)介紹了php實(shí)現(xiàn)簡(jiǎn)單四則運(yùn)算器,文中示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2020-11-11

