C# と VB.NET の質問掲示板

わんくま同盟

ASP.NET、C++/CLI、Java 何でもどうぞ

C# と VB.NET の入門サイト


■89506 / )  big dataとインターネット
□投稿者/ クマコ (4回)-(2018/11/30(Fri) 20:56:19)

分類:[ネットワーク全般] 

最近big dataという言葉をよく耳にしますね。
データの元はインターネットでしょう。
インターネットからたくさんの情報データを取得するのは容易に想像できます。
実際もそうですね。
ただ、どうやってインターネットから必要とするデータを取得するのでしょうか。

私は人間によってHOMEページのアドレス(URL)を一つ一つ手で入力したり、あるいはGOOL頁に検索キーワードを入力したりして
人間の目で有用な情報をコピーしてといてファイルの形で保存する方法しか知りません。
このような方法で『big data』を集めようとしたら、過労死までやっても目的を達成することはできないですね。

実際、何か高度な自動化方法があるのでしょうか。
具体的な方法やツールをご紹介頂ければ理解し易いかと思います。

ぜひご教授お願い致します。




返信 編集キー/


管理者用

- Child Tree -