スクレイピングはwebサイトから一部の情報を効率的に収集する技術ですが、日本語の記事を収集するときは問題点があります。 本記事では日本語の記事を収集する際の問題点を解説します。 せっかくスクレイピングで必要なデータを収集...

スクレイピングが注目されるようになるにつれ、ノンコードでもスクレイピングができるスクレイピングツールが登場するようになりました。 スクレイピングツールには種類があり、用途とスキルに応じて選ばなければいけません。しかし初め...

スクレイピングに関心を抱きスクレイピングツールの構築に挑戦する人はいますが、初心者はサンプルコード付きの解説書を探してください。 本記事では、サンプルコードを参考にするメリットを解説します。そして基本を習得した後にするこ...

「スクレイピング　コツ」というキーワードで検索すると、少ないながらも記事がヒットします。しかしスクレイピングのコツは、少しばかり曖昧模糊としています。 プログラマーにとってのコツ、ツールを使ってスクレイピングするときのコ...

スクレイピングは効率的に目的のデータを収集する技術ですが、サーバー負荷の問題点があります。 このことは少なからずの人が知っていると思いますが、具体的に説明できる人は少ないのではないでしょうか？ 本記事ではスクレイピングと...

スクレイピングという言葉は市民権を得ているので、概略は解っている人は多いでしょう。しかし期待できる成果について、理解している人は少ない印象です。 本記事ではスクレイピングで期待できる成果を、極力解りやすい言葉で伝えます。...

「API」とは、「Application Programming Interface」の頭文字ですが、システムの入り口と理解したらいいと思います。 異なるシステムのデータを取得するときは苦労しますが、api関数を提供して...

短時間で目的のデータを収集するのがスクレイピングの醍醐味ですが、時としてもの凄く遅いことがあります。 あまりにも遅かったらビジネスで活用できないので、何らかの対策を立てるしかありません。 しかし遅い原因が解らなければ、有...

スクレイピング結果をexcelに出力するのは可能で、何本かの解説記事がインターネットで公開されています。 本記事では解説記事をより解りやすく説明すると共に、スクレイピング結果をexcelに出力するメリットについても解説し...

私は外国人の友達が多く、彼ら彼女らに日本語を教えることがあります。専門の教師ではありませんが、教えるときは工夫をしています。 教える際に効果的なのは、辞書の意味を提示することです。 スクレイピングで辞書の意味を収集するの...