ホーム > 日々雑記 「たったひとつの冴えないやりかた」
たったひとつの冴えないやりかた
飲まないアルコール中毒者のドライドランクな日常
もくじ|過去へ|未来へ
2006年09月08日(金) ニュース検索 このページ の下の方にあるニュース検索。自作のPerlスクリプトを、cronで4時間おきに走らせています。
検索の対象は、毎日新聞・日刊ゲンダイ・朝日新聞・日経新聞・ヤフー! ニュース・Google ニュース・livedoor ニュース。
読売や産経が嫌いなわけではありません(好きでもないですが)。このふたつは検索にgooのエンジンを使っていて、検索結果に意図しないものが混じることが多かったので、とりあえず最初に見送ったまま、ほったらかしになっているだけです。
苦労したのが、新聞(ニュースサイト)の検索方法や、検索結果の表示が、しょっちゅう変更になることでした。ニュースサイトがどうやって読者に記事を検索させるか、試行錯誤していたのに付き合わされたという感じです。
そのたびにPerlのスクリプトを手直しする羽目になりました。最近では変更されることはめったになくなりました。
複数のサイトを検索しているので、どうしても同じ記事が複数引っかかります。見出しが大体同じで、日付が同じ記事はまとめることにしています。が、「大体同じ」という判断をプログラムにさせるのは難しいのと、新しいニュースは時間単位で違うので、どうしても似たような生地が大量に並んだりします。
検索クエリーも試行錯誤しています。単に「アルコール依存」で検索してもいい結果がでてこない場合があります。たとえばGoogleの検索は「アルコール 依存 OR 中毒 -燃料 -急性 -メチル」でやっています。でも、ブラジルなどでガソリン代わりに自動車に使われているアルコールの話と、景気が何か(アメリカ国内の消費とか)に「依存」しているっていう経済記事が引っかかったりします。
ギャンブルは、「ギャンブル 依存 OR 中毒 -プロクター」。
プロクターという言葉をはじいているのは、プロクター・アンド・ギャンブルという名前の会社の記事を除くためです。日本では「P&G」という名前のほうが知られているでしょうか。
年々検索に引っかかる記事数は増えています(統計は取ってないけどそんな気がします)。依存症問題が近年急激に深刻化しているとも考えられないので、病気として、社会問題として認知されてきた結果ではないかと思っています。
あと著名人の依存症に関する記事が増えたこともあるでしょう。
RSS配信など、いろいろ試してみたいこともありますが、手を出せずにいます。
もくじ|過去へ|未来へ