データサイエンティスト検定 リテラシーレベル データエンジニアリング 練習問題 第13問: Webサイトから分析用のデータを集める方法と、そのときの決まりについての説明として、最も適切なものはどれか。
データエンジニアリング
– / 81 解いた
第13問
Webサイトから分析用のデータを集める方法と、そのときの決まりについての説明として、最も適切なものはどれか。
解答と解説を先に見る
先に見ると、この問題は今回は育ちません。
正解: 1. 自動でWebサイトを巡回してデータを集めるのがクローリング、集めたデータを解析して必要な部分を抜き出すのがスクレイピングである
「自動でWebサイトを巡回してデータを集めるのがクローリング、集めたデータを解析して必要な部分を抜き出すのがスクレイピング」が適切です。文部科学省の「情報Ⅱ」教員研修用教材は、この2つをこのように定め、合わせてWebスクレイピングといい、PythonではBeautiful Soup4などのパッケージを用いると述べています(出典:『高等学校情報科「情報Ⅱ」教員研修用教材』(文部科学省)を加工して作成)。
「合わせてWebクローリングという」は呼び名の取り違えです。同じ教材は、Web API(プログラムからデータを受け取る窓口)ではURLにメソッド名やパラメータを与えてアクセスすればデータを取得でき、地震のデータを受け取る例を示しており、頁のHTMLを解析する手順は要りません。
著作権法第30条の4は、情報解析のように思想や感情の享受を目的としない利用を、必要と認められる限度で認める規定で(著作権者の利益を不当に害する場合を除く)、原則として許諾が要るとするのは逆です。巡回して集めるのがクローリング、抜き出すのがスクレイピングと押さえましょう。
根拠・参照資料: 著作権法第30条の4
関連キーワード: クローリング・スクレイピング・著作権法・Web API
模試 (100問)
この問題が解けたら、本試験はどうですか?本番形式で、ほかの科目もまとめて確かめる
本番形式の模擬試験で実力チェックPremium (月980円)Premium (ご利用中)本番と同じ制限時間
広告