skillup

技術ブログ

Perl

Perlの文字コードについて その3

投稿日:

実際のPerlでの文字処理に関しては以前の記事でも書いたように下記の原則を守ればOKです。

  1.  原則1 外部から入力された文字列はデコードして内部文字列に変換する
  2.  原則2 外部へ出力する文字列はエンコードしてバイト文字列に変換する
  3.  原則3 ソースコードはUTF-8で保存し、utf8プラグマを有効にする

例えば外部からテキストファイル(内容は「あああ」というひらがなが入っているだけ)を読み込んで置換する処理を書くとします。

その場合コードは下記のようになります。

Perlのサイトで文字コードに対して下記のようなアドバイスを見かけました。

入り口で decode して,内部ではすべて flagged utf8 で扱い,出口で encode する.これがすべてです!とにかくこの基本方針をまもっていれば幸せになれます.

以前読んでも、そのときはあまり理解できませんでしたが、今回ようやくわかりましたね。

「業務に役立つPerl」以外にはこちらのリンクを参考にさせていただきました。

https://bayashi.net/wiki/perl/unicode#utf8.E3.83.95.E3.83.A9.E3.82.B0_ON_.E3.81.A8_OFF_.E3.81.AE.E6.96.87.E5.AD.97.E5.88.97.E9.80.A3.E7.B5.90

なおutf8フラグがついているとData::Dumperを使った場合、文字化けします。文字化けしないためには

と入れてあげればOKです。

http://qiita.com/bunzaemon/items/e309b90cb8791f9d8349
http://ku.ido.nu/post/90223903914/avoiding-data-dumper-dumps-utf8-flagged-values-in-escape

-Perl
-, , ,

執筆者:


comment

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です

関連記事

no image

Basic認証のあるページの情報の取得

ひさびさにPHPネタです。 PHPではWEBページを保存するときにfile_get_contents(url)と書いてあげるとHTMLデータを取得できます。 が、Basic認証などのページは当然fal …

no image

Perlの配列、ハッシュ系の処理(grepを中心に)

Perlの配列やハッシュで便利そうな処理をgrepを中心にいろいろ調べてみました。 Contents1 grepとは?2 grepを使った配列処理 基本3 grepを使った配列処理 ハッシュを含む多次 …

no image

Perl整形ツール Perl Tidy

PHPでコード整形ツールを使いましたが、Perlでも整形ツールがあったのでちょっとメモ。 Perl::Tidyというモジュールです。 公式 http://perltidy.sourceforge.ne …

no image

Perlでの日付処理

Perlで翌月の月末を求め、yyyyMMddで表示する計算があったので対応。 知識がなかったんで何気にちょい時間がかかりました。PerlではこのDateTimeというライブラリがよさげ。 [crayo …

no image

Perlの文字コードに関して その1

Perlの文字コードがらみに関して。 何となくやってきたのですが、せっかくなら整理したいのでまとめておきます。 なおPerl自体は5.8.1以降を前提にしたいと思います。 Contents1 参考資料 …