系統(tǒng)之家 - 系統(tǒng)光盤(pán)下載網(wǎng)站!

當(dāng)前位置:系統(tǒng)之家 > 系統(tǒng)教程 > LinuxUTF8編碼批量轉(zhuǎn)換

Linux下如何將UTF8編碼批量轉(zhuǎn)換成GB2312編碼

時(shí)間:2014-12-11 16:05:05 作者:qipeng 來(lái)源:系統(tǒng)之家 1. 掃描二維碼隨時(shí)看資訊 2. 請(qǐng)使用手機(jī)瀏覽器訪問(wèn): https://m.xitongzhijia.net/xtjc/20141211/32424.html 手機(jī)查看 評(píng)論

  UTF8編碼和GB2312編碼是有區(qū)別的,在sqlplus中導(dǎo)入U(xiǎn)TF8編碼的sql腳本就會(huì)出現(xiàn)亂碼錯(cuò)誤,這時(shí)就需要將UTF8編碼轉(zhuǎn)換成GB2312編碼,可是一個(gè)個(gè)的轉(zhuǎn)換十分麻煩,下面小編就教你如何在Linux下將UTF8編碼批量轉(zhuǎn)換成GB2312編碼。

 Linux下如何將UTF8編碼批量轉(zhuǎn)換成GB2312編碼

  背景

  本人在使用oracle的sqlplus批量導(dǎo)入U(xiǎn)TF8編碼的sql腳本時(shí),由于不了解如何設(shè)置讓sqlplus識(shí)別UTF8格式,導(dǎo)致出現(xiàn)亂碼、錯(cuò)行等錯(cuò)誤,而使工作無(wú)法繼續(xù),在google無(wú)果的情況下只好想辦法轉(zhuǎn)換編碼。

  由于文件較多,手動(dòng)轉(zhuǎn)換太麻煩,于是想到用腳本批量轉(zhuǎn)換,幸好網(wǎng)上相關(guān)腳本比較多,實(shí)現(xiàn)起來(lái)唯一的麻煩是UTF8的BOM標(biāo)記。

  內(nèi)容:

  代碼如下:

  #!/bin/bash

  for loop in `find 。 -type f -name “*.sql” -print`do

  echo $loop

  mv -f $loop $loop.tmp

  dos2unix $loop.tmp

  file_check_utf8=‘file_check_utf8.log’

  sed -n ‘1l’ $loop.tmp 》$file_check_utf810. if grep ‘^\\357\\273\\277’ $file_check_utf8 》/dev/null 2》&111. then

  echo ‘UTF-8 BOM’

  sed -n -e ‘1s/^.。。//’ -e ‘w intermediate.txt’ $loop.tmp14. iconv -f UTF-8 -t GB2312 -o $loop intermediate.txt15. rm -rf intermediate.txt

  rm -rf $loop.tmp

  elif iconv -f UTF-8 -t GB2312 $loop.tmp 》/dev/null 2》&118. then

  echo ‘UTF-8’

  iconv -f UTF-8 -t GB2312 -o $loop $loop.tmp21. rm -rf $loop.tmp

  else

  echo ‘ANSI’

  mv -f $loop.tmp $loop

  fi

  rm -rf $file_check_utf8

  #模擬unix2dos,要求文本文件最后一行必須有換行符28. sed -n -e ‘s/$/\r/g’ -e ‘w ’$loop.tmp $loop29. mv -f $loop.tmp $loop

  done

  #!/bin/bash

  for loop in `find 。 -type f -name “*.sql” -print`do

  echo $loop

  mv -f $loop $loop.tmp

  dos2unix $loop.tmp

  file_check_utf8=‘file_check_utf8.log’

  sed -n ‘1l’ $loop.tmp 》$file_check_utf810. if grep ‘^\\357\\273\\277’ $file_check_utf8 》/dev/null 2》&111. then

  echo ‘UTF-8 BOM’

  sed -n -e ‘1s/^.。。//’ -e ‘w intermediate.txt’ $loop.tmp14. iconv -f UTF-8 -t GB2312 -o $loop intermediate.txt15. rm -rf intermediate.txt

  rm -rf $loop.tmp

  elif iconv -f UTF-8 -t GB2312 $loop.tmp 》/dev/null 2》&118. then

  echo ‘UTF-8’

  iconv -f UTF-8 -t GB2312 -o $loop $loop.tmp21. rm -rf $loop.tmp

  else

  echo ‘ANSI’

  mv -f $loop.tmp $loop

  fi

  rm -rf $file_check_utf8

  #模擬unix2dos,要求文本文件最后一行必須有換行符28. sed -n -e ‘s/$/\r/g’ -e ‘w ’$loop.tmp $loop29. mv -f $loop.tmp $loop

  done

  解釋

  1.處理UTF8的BOM,本人沒(méi)有找到好的辦法,最后用sed+grep判斷了一下,如果前三個(gè)字節(jié)是\\357\\273\\277,則文件必定是UTF8,用sed去掉這三個(gè)字節(jié)再轉(zhuǎn)換

  2.為了避免重復(fù)或者遺漏,腳本中用iconv對(duì)沒(méi)有BOM的文件嘗試轉(zhuǎn)換了一把,轉(zhuǎn)換成功說(shuō)明文件是UTF8,否則說(shuō)明是ANSI也就是GB2312

  3.關(guān)于最后的sed命令,那是因?yàn)楸救说南到y(tǒng)上沒(méi)有unix2dos命令,所以進(jìn)行了模擬,目的是為了方便自己在windows下查看和編輯

  以上就是Linux下將UTF8編碼批量轉(zhuǎn)換成GB2312編碼的方法介紹了,轉(zhuǎn)換后就能解決亂碼等問(wèn)題,可使用命令鏡像批量轉(zhuǎn)換,你學(xué)會(huì)了嗎?

標(biāo)簽 UTF8編碼

發(fā)表評(píng)論

0

沒(méi)有更多評(píng)論了

評(píng)論就這些咯,讓大家也知道你的獨(dú)特見(jiàn)解

立即評(píng)論

以上留言僅代表用戶個(gè)人觀點(diǎn),不代表系統(tǒng)之家立場(chǎng)

其他版本軟件

熱門(mén)教程

人氣教程排行

Linux系統(tǒng)推薦

官方交流群 軟件收錄