心の家路 たったひとつの冴えないやりかた

ホーム > 日々雑記 「たったひとつの冴えないやりかた」

たったひとつの冴えないやりかた
飲まないアルコール中毒者のドライドランクな日常
もくじ過去へ未来へ


2006年09月08日(金) ニュース検索

このページ の下の方にあるニュース検索。自作のPerlスクリプトを、cronで4時間おきに走らせています。

検索の対象は、毎日新聞・日刊ゲンダイ・朝日新聞・日経新聞・ヤフー! ニュース・Google ニュース・livedoor ニュース。
読売や産経が嫌いなわけではありません(好きでもないですが)。このふたつは検索にgooのエンジンを使っていて、検索結果に意図しないものが混じることが多かったので、とりあえず最初に見送ったまま、ほったらかしになっているだけです。

苦労したのが、新聞(ニュースサイト)の検索方法や、検索結果の表示が、しょっちゅう変更になることでした。ニュースサイトがどうやって読者に記事を検索させるか、試行錯誤していたのに付き合わされたという感じです。
そのたびにPerlのスクリプトを手直しする羽目になりました。最近では変更されることはめったになくなりました。

複数のサイトを検索しているので、どうしても同じ記事が複数引っかかります。見出しが大体同じで、日付が同じ記事はまとめることにしています。が、「大体同じ」という判断をプログラムにさせるのは難しいのと、新しいニュースは時間単位で違うので、どうしても似たような生地が大量に並んだりします。

検索クエリーも試行錯誤しています。単に「アルコール依存」で検索してもいい結果がでてこない場合があります。たとえばGoogleの検索は「アルコール 依存 OR 中毒 -燃料 -急性 -メチル」でやっています。でも、ブラジルなどでガソリン代わりに自動車に使われているアルコールの話と、景気が何か(アメリカ国内の消費とか)に「依存」しているっていう経済記事が引っかかったりします。

ギャンブルは、「ギャンブル 依存 OR 中毒 -プロクター」。
プロクターという言葉をはじいているのは、プロクター・アンド・ギャンブルという名前の会社の記事を除くためです。日本では「P&G」という名前のほうが知られているでしょうか。

年々検索に引っかかる記事数は増えています(統計は取ってないけどそんな気がします)。依存症問題が近年急激に深刻化しているとも考えられないので、病気として、社会問題として認知されてきた結果ではないかと思っています。
あと著名人の依存症に関する記事が増えたこともあるでしょう。

RSS配信など、いろいろ試してみたいこともありますが、手を出せずにいます。


もくじ過去へ未来へ

by アル中のひいらぎ |MAILHomePage


My追加