自分の作った製品を開発者が使う事を"Eat Your Own Dog Food"と言いかたをします。ってそれはどうでもいいんだけど。で、昨日今日はまさにそれで、Gunghoを使ってあちこちクロールしながらスパムなページは登録しない、という仕組みをずっと書いてました。
今思い出したけど、そういえばrobots.txtをチェックする仕組みってまだ書いてなかったわ。やるか。
自分の作った製品を開発者が使う事を"Eat Your Own Dog Food"と言いかたをします。ってそれはどうでもいいんだけど。で、昨日今日はまさにそれで、Gunghoを使ってあちこちクロールしながらスパムなページは登録しない、という仕組みをずっと書いてました。
今思い出したけど、そういえばrobots.txtをチェックする仕組みってまだ書いてなかったわ。やるか。
Daisuke Maki (a.k.a lestrrat): Perl hacker, Director of Japan Perl Association, YAPC::Asia Tokyo Organizer (2009-2012), Fluent in Japanese, English. Ex-Brazilian (sorta)
#perl #c #ruby #java #mysql #english #japanese #opensource #stf #cooking #scotch #cigar
翔泳社よりモダンPerl入門(2010)を出版させていただいております。できれば内容をアップデートしたいので是非皆様・・・現在の在庫処理にお力をお貸しください!><