フリーランスは何か武器がなければ、生きていくのが難しいです。武器はなんでもいいわけではなく、時代にマッチしたものでなければいけません。 スクレイピングは武器になる技術で、真剣にスクレイピングに向き合えば、フリーランスの強...

スクレイピングでテキストを取得するのは簡単です。プログラム経験者は知っていると思いますが、プログラムの正規表現を使うだけで、目的のテキストを取得することはできます。 しかし一般の人がプログラムを覚え、テキストをスクレイピ...

投資は貯蓄とは性格が異なり、中長期的なリターンを目的にしています。ただ投資にはリスクがあります。それでも投資をする人が常にいるのは、投資には大きな魅力があるからでしょう。 投資のリスクを極力減らすためにはビジネス的な観察...

スクレイピングでテーブルのデータを取得するのは簡単で、Excelでもたいていのデータは取得できます。 本記事では何故テーブルのデータは取得するのが簡単なのか、またテーブルのデータをスクレイピングするときの注意点を解説しま...

昨今のビジネスは、先が読めないものが多いです。ホリエモンは5年先のことも、解らないと言っています。それでも多くのデータがあれば、先のことが読みやすくなります。 最近はマーケティングのためにスクレイピングをする企業が増えて...

pythonは初心者におすすめのプログラム言語ですが、それだけではなくスクレイピングにもおすすめです。本記事ではpythonが初心者とスクレイピングに向いている理由と、効果的な勉強方法について解説したいと思います。 私は...

スクレイピングとブラウザには密接な関係があります。ブラウザはインターネットを見るためのソフトですが、スクレイピングもブラウザ経由で行います。 ブラウザはソフトですが、クリックしたり選択したりするのはユーザーの仕事です。そ...

昨今のスクレイピングは合わせ技が多いですが、合わせ技が多いのはサイトの構成が複雑になってきたからです。 合わせ技を活用しなければスクレイピングの負担が増えるので、望ましくありません。スクレイピングは簡単に必要な情報が抽出...

スクレイピング事例の記事は結構ヒットしますが、こちらの記事では深掘りしたいと思います。技術的に深掘りするのではなく、実行したらどのようなメリットがあるのかを深掘りしたいと思います。 スクレイピングは草創期の頃と比較すると...

マンモスサイトの情報収集は絶対にスクレイピングが便利ですが、全ページの情報を取得したら、どのようなメリットがあるのでしょうか？ 本記事では、全ページの情報を取得するときのポイントを解説します。基本的にスクレイピングツール...