[B! perl][HTML] denkenのブックマーク

HTML::Element と HTML::TreeBuilder で盆栽 - @kyanny's blog

HTML::Element とか HTML::TreeBuilderで HTML 構文木をいじることを盆栽と呼ぶらしいですが、最近よく盆栽してていろいろ覚えたことがあるのでメモ。 as_HTML() で HTML エンティティに変換させない HTML::Element#as_HTML を呼ぶと HTML 文字列が返るのだけど、これを引数なしで呼ぶと "all unsafe characters" が HTML エンティティに変換︵エンコード︶される。これは普通あまり望ましくないので︵変換などせずそのまま出して欲しいことのほうが多い︶、それを回避するには my $html = $elem->as_HTML('');と、空文字列を渡してやる。 HTML::TreeBuilderのインスタンスに対して as_HTML() を呼ぶとタグをつけられてしまうこれはサブクラスの HTML::Tr

denken 2009/11/15

リンク

XML::LibXMLでHTML文書を扱う - 徒書

XML::LibXML大好きな者が以下述べてみます。しかし、XML::Liberalを除けば、XML::*なモジュールはX抜きのHTMLを食ってくれない.... と、404 Blog Not Found:perl - HTMLをXMLとして扱うで書かれていたのですが、XML::LibXML、というかその基となるCライブラリlibxml2はHTMLパーサも備えているので、直にHTMLを扱うこともできます。ただ元がXMLパーサなだけに、少しでもHTML文書に壊れた部分があると解析エラーを起こして停止してしまいますが、幸いなことにそのエラーから回復するモードも備えています。以下サンプルを。 use strict; use warnings; use XML::LibXML; my $parser = XML::LibXML->new(); $parser->recover_silently(

denken 2009/02/23

リンク

編集距離（レーベンシュタイン距離）の計算 - Ceekz Logs (Move to y.ceek.jp)

文字列間の類似度を求める方法の一つとして、編集距離が挙げられます。編集距離は、考案者にちなみレーベンシュタイン距離とも呼ばれますが、具体的には、挿入や削除、置換によって、一方の文字列から他方の文字列に変換するために必要な作業の最小回数です。 use List::Util; sub levenshtein_distance { my ($list_1, $list_2) = @_; my $len_1 = scalar(@{$list_1}); my $len_2 = scalar(@{$list_2}); my @d; foreach my $i (0 .. $len_1) { $d[$i][0] = $i; } foreach my $j (0 .. $len_2) { $d[0][$j] = $j; } foreach my $i (1 .. $len_1) { foreach my

denken 2008/11/09

リンク

[O] 「HTML::Template::Pro」が「HTML::Template」より、かなり早くて助かる

« ウィジェットサービス﹁FLO‥Q﹂の﹁時計型ウィジェット﹂ | トップページ | ユーザのクエリの意味の曖昧さを解決してくれる﹁SemantiFind﹂ » ﹁HTML::Template::Pro﹂が﹁HTML::Template﹂より、かなり早くて助かる [Perl][chalow] なかなか、HTML::Template::Proを試すのに丁度よいタスクが見つからなかったのですが、僕が使ってるchalowが﹁HTML::Templeate﹂というPerlモジュールを使っているので、早速﹁HTML::Template::Pro﹂と入れ替えてみました。 - Igor Yu. Vlasenko / HTML-Template-Pro-0.71 - search.cpan.org -- http://search.cpan.org/~viy/HTML-Template-Pro-0.7

denken 2008/09/16

リンク

HTML::TreeBuilder + CSSセレクタがいい感じな件

先日 PerlでCSSセレクタで HTML::Selector::XPath がいい感じであると思ったわけですが、CSS セレクタだけじゃなく何気に HTML::TreeBuilder::XPath とのコンボがすげーイイ!ということにいまさら気づきました。 HTML::TreeBuilder::XPath で findnodes するとツリー状に連なった HTML::Element なデータ構造が返ってくるんですが、HTML::Element は API をかなりいろいろ持ってて、これをうまく使ってやるとスクレイピングを自然な感じで書けます。例えばはてなダイアリーの任意のページから、本文部分だけをスクレイピングしたいと思ったときにキーワードリンクが邪魔だったりするわけですが、とりあえず HTML::Selector::XPath で div.section をぶっこ抜いて取れたHT

denken 2006/10/07

むわむわ

リンク

はてなブックマーク

タグ

関連タグで絞り込む (9)

perlとHTMLに関するdenkenのブックマーク (5)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第3週）

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス