スクレイピングにsleep処理が必要なのは昔から言われていましたが、深掘りした記事は少ないようです。 本記事では、スクレイピングにsleep処理が必要な理由を深掘りしたいと思います。 スクレイピングは有益なプログラム手法...

ホームページを手打ちしている人は、誰でもhrefタグの役割を知っているでしょう。 hrefタグは別名リンクタグと言われていますが、他のURLに飛ばしたり、同じサイトだけど別のファイルに飛ばすときに使います。 そんなhre...

wikipediaはさまざまな情報や人物を取り上げているサイトですが、誇張なく真面目な内容です。 wikipediaの情報をスクレイピングしたら、自分だけのユニークなサイトが制作できるでしょう。 本記事ではwikiped...

タレントの蛭子能収さんはボートレースが好きですが、ボートレースの面白さに触れたら、一生離れられないみたいですね。 ボートレースの面白さには予想の面白さがありますが、予想の元になるのはデータです。 データは公開されているの...

SNSだけではなく、パスワード付きのサイトが増えてきました。 パスワード付きサイトで有名なのは、ポイントサイト、ネットショップ、SNSではないでしょうか？ それらのサイトの情報をスクレイピングで取得したら、役立つことが多...

お小遣い稼ぎに熱心な人は、ポイントサイトを利用しているのではないでしょうか。 そんなポイントサイトの大切な情報だけを、スクレイピングで取得したら、効率的にポイント稼ぎができますね。 ポイントサイトというのは、スクレイピン...

スクレイピングはwebサービスですが、同じwebサービスのlineの内容はスクレイピングできるのでしょうか？ こんな疑問を抱いた人は私だけではないと思います。 本記事ではスクレイピングとlineの連携について解説をします...

スクレイピングは何でも隠蔽してデータを抜き取るイメージがありますが、実際は足跡は残ります。 足跡の中にはポート番号もありますが、本記事ではスクレイピングとポート番号を深掘りしたいと思います。 ポート番号と聞くと専門的な領...

コンピューター用語に慣れている人であれば、直ぐに理解できると思いますが、Scraping Browser APIはAPIサービスです。 APIサービスとはインターネットを介して、他のソフトウェアやシステムに接続できるサー...

phpはサーバーサイドで作動するスクリプト言語ですが、関数が多いのが特徴です。最初から豊富な関数が用意されているので、プログラマは引数を指定するだけです。 私はphpの使用歴が長いですが、これだけ関数が多かったら、プログ...