スクレイピングは有意義な技術ですが、ビジネスの種にするには工夫が必要です。工夫が必要なのは、誰もが閲覧できるデータだからです。 一般的に誰もが閲覧できるデータは、お金を出して購入する価値はありません。このような背景がある...

ダウンロードという言葉は、日常的に使っていると思います。そしてアップロードという言葉も、日常的に使っているでしょう。 しかしスクレイピングという言葉を、日常で使っている人は聞いたことがありません。それでもスクレイピングと...

ファッション通販サイトのzozoはYahoo!傘下になりましが、大変お得なサイトであるのは変わっていません。そんなzozoの情報をスクレイピングするのは、意味のあることです。 しかし無意味なデータを、スクレイピングするの...

スクレイピングは便利な技術ですが、操作は結構面倒です。そんなスクレイピングを簡単にするには、自動化するのが一番です。 スクレイピングを自動化したらITリテラシーのない人でも使えるし、何よりも作業が効率化します。しかしスク...

「スクレイピング リスト作成」のキーワードで検索すると、ヒットする記事は多いです。上位は広告を打っているサイトが表示されますが、広告を打つのはスクレイピングでリスト作成をしたら、ビジネスになるからだと思います。 本記事で...

スクレイピングはデータを効率的に抜き出す技術です。 スクレイピングは非プログラマーにとっては難解なものかもしれませんが、他の大規模なシステムと比較すれば、さほど難しい技術ではありません。 しかし時代がスクレイピングを必要...

熱狂的なプロ野球ファンは、さまざまな記録にも関心を抱くのではないでしょうか？しかし記憶は薄れていくもので、最近の記録は覚えていても昔の記録は忘れがちです。 忘れたときはインターネットで昔の記録を調べたらいいですが、調べる...

youtubeのコメントのスクレイピングは難しいです。最初は簡単だと思いましたが、対象のタグが見つかりませんでした。対象のタグを隠している理由はスクレイピング対策だと思いますが、攻略は不可能ではないと思います。 インター...

スクレイピングもインターネットを介して実行するので、ユーザーエージェントの記録は残ります。ユーザーエージェントとは使用しているOSやブラウザのことですが、スクレイピングする際は隠した方が無難です。 本記事では、ユーザーエ...

「郵便番号　スクレイピング」で検索すると、多くの記事がヒットします。記事の内容はプログラミングによる解説が多いですが、郵便番号のスクレイピングは、既存のスクレイピングツールで十分です。 本記事では郵便番号のスクレイピング...