[B! unicode][perl] makoto15のブックマーク

makoto15 id:makoto15

unicodeとperlに関するmakoto15のブックマーク (13)

Unicode - perl+javascript - にプログラムでよく使われる英語の記号の読み方を調べさせる : 404 Blog Not Found
2014年03月29日00:00 カテゴリTipsLightweight Languages Unicode - perl+javascript - にプログラムでよく使われる英語の記号の読み方を調べさせるプログラマのための文字コード技術入門矢野啓介プログラマーたるもの、プログラムに出来ることを自らやるべからず。挑戦者求む！︻英語︼英語でなんて読むか知ってる？ by @masuidrive 増井雄一郎│CodeIQ プログラムでよく使われる英語の記号の読み方知っていますか？というわけでリハビリをかねて。 dankogai/js-charnames 使い方git cloneしてmakeしてください。 charnames.jsというファイルが出来るので、あとはこんな感じで使って下さい。 Charnames['']=''; Unicode 6.1的に、というのか生成する時に使った
makoto15 2014/03/29
perl

unicode
リンク
Perl Unicode Cookbook: The Standard Preamble
Perl Unicode Cookbook: The Standard Preamble Apr 2, 2012 by Tom Christiansen Editor’s note: Perl guru Tom Christiansen created and maintains a list of 44 recipes for working with Unicode in Perl 5. This is the first recipe in the series. ℞ 0: Standard preamble Unless otherwise noted, all examples in this cookbook require this standard preamble to work correctly, with the #! adjusted to work on you
makoto15 2013/01/27
perl

unicode

cookbook
リンク
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記はてなグループ日記のエクスポートデータは2020年2月28
makoto15 2008/09/11
perl

unicode

cpan
リンク
404 Blog Not Found:perl & Unicode - その字の名前
2006年11月20日23:00 カテゴリLogos一日一行野郎 perl & Unicode - その字の名前 Unicodeの隠れた功績として、こうした﹁何て呼べばいいの?﹂という文字に(はんば無理矢理)名前をつけてくれたこともあります。例えば、新方言時代〜﹁小さい“お”﹂って何？﹁々﹂はなんていえばいいのだろうか？には々 U+3005 IDEOGRAPHIC ITERATION MARK といった具合に。この手の調査は、Perl5.8以降が手元にあると簡単に出来ます。例えば、 perl -Mencoding=utf8 -MHTML::Entities -Mcharnames=:full -ple \ '$o=ord; $_=sprintf"$_ U+%04X %s", $o, charnames::viacode($o)' で、こんな具合にコードポイントとUnicode
makoto15 2006/11/21
perl

unicode
リンク
Perl 5.8 Unicode で再びはまり中 : NDO::Weblog
Perl 5.8 Unicode で再びはまり中 [ Perl ] またしても Perl 5.8 での Unicode ではまっています。ドキュメントにはコマンドラインスイッチ -C や環境変数 PERL_UNICODE で、PerlIOレイヤにおける UTF-8 の扱いを制御できるそうなのですが、どうにもうまくいきません。以下、はまり記録です。少し前に 'Perl 5.8 以降においての Unicode 文字列の扱い方' というエントリを書きました。UTF-8 で記述された外部ファイルを open する場合などには PerlIOレイヤを使って明示的に UTF-8 であることを指定すると良い、という話などです。 open $fh, "<:utf8", $file; といった具合で。自力で外部ファイルを open する場合にはこれでいいのですが、ファイルの open() をモジュール
makoto15 2006/04/04
perl

Unicode

文字コード
リンク
Perl 5.8.x Unicode 関連
makoto15 2006/04/04
perl

Unicode

文字コード
リンク
Perl-5.8 MEMO
Perl-5.8 覚え書き Last Updated at $Date: 2005/12/04 04:00:59 $. このページは，Perl-5.8.2 を使う上で困ったことなどの覚え書きです．日本語を含むスクリプトを書く日本語 EUC でスクリプトを書く UTF-8 でスクリプトを書く日本語を含むファイルを開く連想配列で日本語を使う日本語を含む正規表現文字コードの自動判定古い Perl でも実行できるように書く未解決の問題日本語を含むスクリプトを書く Perl-5.8.x で日本語を扱うスクリプトを書く場合，大きく2通りの方法があります．日本語 EUC でスクリプトを書く． UTF-8 でスクリプトを書く．どちらの方法でも， (1)ファイル入出力， (2)データベースアクセス， (3)プロセス間通信の3つに気をつけて，明示的にバイト列を文字列に変換したり，また逆
makoto15 2006/04/04
perl

Unicode

文字コード
リンク
Perl の多言語処理 -- Perl ヒント集 (ja)
エンコードの処理の基本 Perl 5.8 以降，テキストの処理が UTF-8 (Unicode の変換形式のひとつ) を軸におこなわれるようになりました。Shift JIS や EUC-JP での処理が一般的な日本語を Perl で扱う場合，エンコードを意識したプログラミングをおこなうことが必要になります。具体的には，Perl でエンコードを意識する必要のあるのは以下の箇所です。スクリプト自体のエンコードファイルの入出力標準入出力標準エラー出力データベース，CGIなどプロセス間のインターフェース Perl 5.8 では内部処理が UTF-8 で行われますが，特にエンコードの指定がされない場合，テキストは文字単位ではなく，バイト単位で処理されます。バイト単位で Shift JIS などのテキストを処理することもある程度可能ですが，2バイトの文字が文字として認識されていませんから，正
makoto15 2006/04/04
perl

Unicode

文字コード
リンク
Perl5.8 の UNICODE 対応
perl は 5.8 から Unicode(utf-8) がサポートされました．5.6 でも Unicode に対応はしていましたが，ぜんぜん使い物にならず，ようやく 5.8 でまともに使えるようになったということです．ただせっかく使えるにもかかわらず perldoc などを見てもイマイチ使い方がわからないので，独自にまとめてみたのがこのページです．誤った書き方や勘違いをしていることもあるので，形式的ですがこのページの内容は無保証です．内容文字コード変換 perlIO jperlからの移行 UTF-8フラグ文字コード自動判別 Unicode Standard Unicode 正規化その他参考資料文字コード変換とりあえず perl5.8 で新しく組み込まれた機能を見るために，euc-jp から shift_jis への変換スクリプトをいくつか載せます． openを利用し
makoto15 2006/04/04
perl

unicode

文字コード
リンク
naoya.dyndns.org is offline
naoya.dyndns.org is currently offline. Please try again later. Questions about our services? Learn more at Dyn.com.
makoto15 2006/04/04
perl

unicode

文字コード
リンク
perl - When \p{} gets evaluated : 404 Blog Not Found
2006年03月07日02:15 カテゴリ perl - When \p{} gets evaluated 理由が判明したのでentry。追記にしようと思いましたが注意喚起のため。 404 Blog Not Found:perl - how 2 cope w/ \p{IsBogus} これに関してはちょっとバグっぽげなのですがその理由とは、﹁\p{}は本当に利用されるまで評価されない﹂というものです。わかりやすくするために、以下に例を示します。 'ok' =~ /no\p{IsBogus}/; # すでに's'でmatchが失敗するのでnoerror 'nok' =~ /no\p{IsBogus}/; # noまではmatchに成功。\p{}でexception その\p{}を展開しているのが、lib/utf8_heavy.plなのですが、 Heavyというだけあって結構大きなscr

$perl - When \p{} gets evaluated : 404 Blog Not Found$
makoto15 2006/03/07
perl

unicode

dankogai
リンク
perl - how 2 cope w/ \p{IsBogus} : 404 Blog Not Found
2006年03月07日00:38 カテゴリLightweight Languages perl - how 2 cope w/ \p{IsBogus} というわけで私めが。 Rauru Blog - BlogArchive - perl 正規表現での Unicode Property perl 5.8.* のパターンマッチで、\p での Unicode 属性を使う場合なんですが、不正な属性名を指定した場合にエラーになるかならないかがどこで分かれるか、ってご存知の方いらっしゃいませんか?うちの環境は 5.8.8 なんですが、 m/\p{IsDAMEDAME}/; だとエラーにならず普通にアンマッチ、一方 m/\p{IsDAMEDAME}/i;にすると Can't find Unicode property definition "DAMEDAME" とのエラーを吐き、さらに m/ \p{

$perl - how 2 cope w/ \p{IsBogus} : 404 Blog Not Found$
makoto15 2006/03/07
perl

Unicode

dankogai
リンク
perl5.8のUnicodeは便利 - Pixel Pedals of Tomakomai
前回とまったく逆のタイトルで恐縮だけども(笑)、utf8フラグを立てて文字列を扱うと日本語を直接正規表現にかけれてとても便利。 use utf8;として、utf8でソースを書いてやるのが一番使いやすいかな。内部では全ての文字列をutfフラグを立てて扱う。変換にはEncode::decodeとか、Encode::Guessも有効。utfフラグさえ立てれば、日本語の正規表現がばっちり使える。処理が終わったら、最後はbinmodeを使うかopenの時にPerlIOな文字コード指定をして入出力、と。
makoto15 2006/01/06
perl

unicode
リンク
1