C++實(shí)現(xiàn)判斷一個(gè)字符串是否為UTF8或GBK格式的方法
本文實(shí)例講述了C++實(shí)現(xiàn)判斷一個(gè)字符串是否為UTF8或GBK格式的方法。分享給大家供大家參考,具體如下:
在處理外部數(shù)據(jù)的時(shí)候,很可能因?yàn)閿?shù)據(jù)格式不一樣而導(dǎo)致亂碼,甚至導(dǎo)致某些程序掛掉。鑒于對(duì)多數(shù)系統(tǒng)來(lái)說(shuō),使用是更被廣泛使用的utf8,所以判斷是不是utf8格式顯得很重要了。
下面是一個(gè)判斷字符串是否為utf8的函數(shù):
bool is_str_utf8(const char* str) { unsigned int nBytes = 0;//UFT8可用1-6個(gè)字節(jié)編碼,ASCII用一個(gè)字節(jié) unsigned char chr = *str; bool bAllAscii = true; for (unsigned int i = 0; str[i] != '\0'; ++i){ chr = *(str + i); //判斷是否ASCII編碼,如果不是,說(shuō)明有可能是UTF8,ASCII用7位編碼,最高位標(biāo)記為0,0xxxxxxx if (nBytes == 0 && (chr & 0x80) != 0){ bAllAscii = false; } if (nBytes == 0) { //如果不是ASCII碼,應(yīng)該是多字節(jié)符,計(jì)算字節(jié)數(shù) if (chr >= 0x80) { if (chr >= 0xFC && chr <= 0xFD){ nBytes = 6; } else if (chr >= 0xF8){ nBytes = 5; } else if (chr >= 0xF0){ nBytes = 4; } else if (chr >= 0xE0){ nBytes = 3; } else if (chr >= 0xC0){ nBytes = 2; } else{ return false; } nBytes--; } } else{ //多字節(jié)符的非首字節(jié),應(yīng)為 10xxxxxx if ((chr & 0xC0) != 0x80){ return false; } //減到為零為止 nBytes--; } } //違返UTF8編碼規(guī)則 if (nBytes != 0) { return false; } if (bAllAscii){ //如果全部都是ASCII, 也是UTF8 return true; } return true; }
關(guān)于utf8的一般性簡(jiǎn)介和二進(jìn)制格式可以參考百度百科。同樣關(guān)于GBK的判斷,也是使用的同樣的方法,具體代碼如下:
bool is_str_gbk(const char* str) { unsigned int nBytes = 0;//GBK可用1-2個(gè)字節(jié)編碼,中文兩個(gè) ,英文一個(gè) unsigned char chr = *str; bool bAllAscii = true; //如果全部都是ASCII, for (unsigned int i = 0; str[i] != '\0'; ++i){ chr = *(str + i); if ((chr & 0x80) != 0 && nBytes == 0){// 判斷是否ASCII編碼,如果不是,說(shuō)明有可能是GBK bAllAscii = false; } if (nBytes == 0) { if (chr >= 0x80) { if (chr >= 0x81 && chr <= 0xFE){ nBytes = +2; } else{ return false; } nBytes--; } } else{ if (chr < 0x40 || chr>0xFE){ return false; } nBytes--; }//else end } if (nBytes != 0) { //違返規(guī)則 return false; } if (bAllAscii){ //如果全部都是ASCII, 也是GBK return true; } return true; }
按照編碼規(guī)則這么寫,是正確的。但鑒于現(xiàn)在的utf8對(duì)于中文一般都是三個(gè)字節(jié),而且utf8的編碼規(guī)則存在重合,如果是utf8,使用上面的這個(gè)函數(shù),就會(huì)出現(xiàn)一個(gè)尷尬的問(wèn)題,當(dāng)中文字符為奇數(shù)個(gè)判斷正確,為則偶數(shù)個(gè)無(wú)法區(qū)別。
最后:如果誰(shuí)有更好的辦法判斷一個(gè)字符串是否為GBK格式,歡迎告知。
希望本文所述對(duì)大家C++程序設(shè)計(jì)有所幫助。
欄 目:C語(yǔ)言
下一篇:C++利用LuaIntf調(diào)用Lua的方法示例
本文標(biāo)題:C++實(shí)現(xiàn)判斷一個(gè)字符串是否為UTF8或GBK格式的方法
本文地址:http://mengdiqiu.com.cn/a1/Cyuyan/1027.html
您可能感興趣的文章
- 04-02c語(yǔ)言沒(méi)有round函數(shù) round c語(yǔ)言
- 01-10如何判斷一個(gè)數(shù)是否為2的冪次方?若是,并判斷出來(lái)是多少次方
- 01-10數(shù)據(jù)結(jié)構(gòu)課程設(shè)計(jì)-用棧實(shí)現(xiàn)表達(dá)式求值的方法詳解
- 01-10使用OpenGL實(shí)現(xiàn)3D立體顯示的程序代碼
- 01-10深入理解C++中常見(jiàn)的關(guān)鍵字含義
- 01-10求斐波那契(Fibonacci)數(shù)列通項(xiàng)的七種實(shí)現(xiàn)方法
- 01-10C語(yǔ)言 解決不用+、-、&#215;、&#247;數(shù)字運(yùn)算符做加法
- 01-10使用C++實(shí)現(xiàn)全排列算法的方法詳解
- 01-10如何判斷一個(gè)數(shù)是否為4的冪次方?若是,并判斷出來(lái)是多少次方
- 01-10c++中inline的用法分析


閱讀排行
- 1C語(yǔ)言 while語(yǔ)句的用法詳解
- 2java 實(shí)現(xiàn)簡(jiǎn)單圣誕樹的示例代碼(圣誕
- 3利用C語(yǔ)言實(shí)現(xiàn)“百馬百擔(dān)”問(wèn)題方法
- 4C語(yǔ)言中計(jì)算正弦的相關(guān)函數(shù)總結(jié)
- 5c語(yǔ)言計(jì)算三角形面積代碼
- 6什么是 WSH(腳本宿主)的詳細(xì)解釋
- 7C++ 中隨機(jī)函數(shù)random函數(shù)的使用方法
- 8正則表達(dá)式匹配各種特殊字符
- 9C語(yǔ)言十進(jìn)制轉(zhuǎn)二進(jìn)制代碼實(shí)例
- 10C語(yǔ)言查找數(shù)組里數(shù)字重復(fù)次數(shù)的方法
本欄相關(guān)
- 04-02c語(yǔ)言函數(shù)調(diào)用后清空內(nèi)存 c語(yǔ)言調(diào)用
- 04-02func函數(shù)+在C語(yǔ)言 func函數(shù)在c語(yǔ)言中
- 04-02c語(yǔ)言的正則匹配函數(shù) c語(yǔ)言正則表達(dá)
- 04-02c語(yǔ)言用函數(shù)寫分段 用c語(yǔ)言表示分段
- 04-02c語(yǔ)言中對(duì)數(shù)函數(shù)的表達(dá)式 c語(yǔ)言中對(duì)
- 04-02c語(yǔ)言編寫函數(shù)冒泡排序 c語(yǔ)言冒泡排
- 04-02c語(yǔ)言沒(méi)有round函數(shù) round c語(yǔ)言
- 04-02c語(yǔ)言分段函數(shù)怎么求 用c語(yǔ)言求分段
- 04-02C語(yǔ)言中怎么打出三角函數(shù) c語(yǔ)言中怎
- 04-02c語(yǔ)言調(diào)用函數(shù)求fibo C語(yǔ)言調(diào)用函數(shù)求
隨機(jī)閱讀
- 01-10delphi制作wav文件的方法
- 08-05織夢(mèng)dedecms什么時(shí)候用欄目交叉功能?
- 01-10SublimeText編譯C開發(fā)環(huán)境設(shè)置
- 01-11ajax實(shí)現(xiàn)頁(yè)面的局部加載
- 01-11Mac OSX 打開原生自帶讀寫NTFS功能(圖文
- 08-05dedecms(織夢(mèng))副欄目數(shù)量限制代碼修改
- 08-05DEDE織夢(mèng)data目錄下的sessions文件夾有什
- 04-02jquery與jsp,用jquery
- 01-10C#中split用法實(shí)例總結(jié)
- 01-10使用C語(yǔ)言求解撲克牌的順子及n個(gè)骰子