スクレイピングはプログラム手法の一つですが、サイトのデータを効率的に収集するのが目的です。スクレイピングという言葉はインターネットを中心に広がってきましたが、広がるにつれスクレイピングツールを作成したい人も増えてきました...

スクレイピングはソフトを使っても可能ですが、webサービスを使っても実行できます。スクレイピングはweb上のデータを収集するものなので、webサービスとの親和性は抜群です。ただ適したものを選ばなければ、無駄な投資になりま...

youtubeはスクレイピングを禁止しているようです。規約を読む限りスクレイピング禁止という文字は見つかりませんが、規約の一部には次の文章があります。 本サービスまたはコンテンツのいずれかの部分に対しても、アクセス、複製...

スクレイピング技術は英語圏で生まれました。ところで英語圏には、どのようなスクレイピング関連の記事があるのでしょうか？ 本記事のタイトルは「英語で見るスクレイピングの世界」ですが、アメリカ版のYahoo!などを通してスクレ...

スクレイピングはタグを参照し、タグで囲まれたデータを収集するテクニックです。テクニックといっても超高度ではなく、基本的なプログラミング能力と、基本的なhtmlの知識があれば実現可能です。 初心者はまずhtmlから覚えるべ...

インスタは人気のスクレイピングターゲットですが、インスタのスクレイピングは難しいです。しかし不可能ではありません。実際インスタをスクレイピングし、商売にしている人はいます。 インターネットでは攻略方法が紹介されているので...

Amazonをスクレイピングする人は多いですが、Amazonをスクレイピングする意義は何でしょうか？Amazonからイメージするものは巨大ネットモールだと思いますが、巨大ネットモールから価値のあるデータを効率的に抽出する...

スクレイピングツールは、他のソフトとは違って馴染みが薄いかもしれません。このような背景があるので、スクレイピングツールという単語は知っていても、使い方を知らない人はいるでしょう。 使い方を知らない人が大半なのに、解説して...

スクレイピングはサイトの情報を効率的に収集する技術で、基本的には作成言語は関係ありません。もちろん英語サイトもスクレイピングできます。 ところで英語サイトをスクレイピングしたら、どのようなメリットがあるのでしょうか？本記...