不具合報告 / 433


「太鼓の達人 譜面とかWiki」の機械的なデータ取得(スクレイピング)許可の要請(人力での作業より低負荷)

ページ不具合報告
サマリ「太鼓の達人 譜面とかWiki」の機械的なデータ取得(スクレイピング)許可の要請(人力での作業より低負荷)
投稿者太鼓の達人 譜面とかWiki 移転予定先管理人?
状態
投稿日2023-01-28 (土) 16:53:45

質問

お世話になっております。 「不具合報告/431」のコメントに追記する形で問い合わせしていた者です。

私が1/24(火)夜にコメントを追記してから回答が無いため、念のため新規トピックとしてご連絡差し上げます。

先日申し上げました通り、この度、『太鼓の達人 譜面とかWiki』を、WikiHouseから別のレンタルWikiサービスに移転する運びとなりました。移転予定先のレンタルWikiサービスではPukiWikiの移転支援を行っており、その方法の1つに「機械的にデータを取得(スクレイピング)する」というものがあります。

先日この件について問い合わせた際、「スクレイピングはサーバーへの負荷も大きく、他のWikiの方にご迷惑もかかりますので、ご遠慮願います。」という回答を頂いておりましたが、それについて移転予定先に伝えた所、「スクレイピングにつきましては、負荷がかかりません。 人力で作業するよりも緩やかにデータを取得することができます。」という回答がありました(太字・下線は投稿者が付与したもの)。具体的には、スクレイピングは下記の通り行われるとの事です。

  • スクレイピングのペースは数秒間に1ページのレベル(10秒で1ページなど)
  • スクレイピングは編集ページのテキストエリアをターゲットにする事で、記事のHTMLコンバートがほぼ発生しないため、通常の記事閲覧より負荷が掛からない

なお、再三申し上げております通り、当該Wikiの移転に関してはほぼ確定的な情勢で、スクレイピングが行えない場合は、人力での作業を予定しております。
つきましては、重ね重ね申し訳ございませんが、Wikiのサーバーと利用者、双方の負担を和らげるため、スクレイピングによるデータ取得を認めて頂きたく、お願い申し上げます。許可さえ頂ければ、そちらでの特別な対応は不要です。

以上、お忙しい中恐れ入りますがご確認頂けますと幸いです。

回答

  • スクレイピングであれ、人力であれ、その他いかなる手段であっても複製を許可することはできません。 -- WikiHouse 2023-01-31 (火) 00:35:01
  • 「人力であれ複製を認めない」というのは、WikiHouseから別Wikiへの移転を認めないという事でしょうか? もしそういう認識で合っているのなら、お言葉ですがそれはあまりにも自分勝手な言い分ではないでしょうか?

    今回、御社にダンプファイル提供やスクレイピング許可を依頼したのは、コピーサイトを作成するのではなく、別のレンタルWikiサービスに内容を移管するためです。つまり、複製ではなく、データの移動が目的です。ユーザーは、より良い環境を求めてサービスを選ぶ権利があるはずです
    御社の利用規約には、WikiHouse上のデータに関する権利やデータ複製の許可について、記載がありませんでした。もし、データの複製や移動(サイトの移転)を禁止するのであれば、利用規約に最初から記載するべきだと思います。重大かつユーザーに不利な条件を後から押し付けるのは、こちらからすれば悪印象以外の何物でもありません

    御社の方針上スクレイピングを受け入れられないのであれば、それは甘んじて受け入れようと思います。しかしながら、手動によるデータの移管は推し進める方針です。
    今回の当該Wikiの移転はユーザーの民意によって決まったものであり、その背景にはそれなりの理由があるはずです。先日、ユーザーに取ったアンケートの結果を共有しましたが、その結果などを参考にしながら、今後、より魅力あるサービスを運営される事を切に願います。なお、アンケート結果の詳細(例えば、ユーザー個別の回答内容など)が欲しい場合は、ご連絡頂ければ対応します。 -- 投稿者? 2023-01-31 (火) 01:22:27
  • 念のため付け加えておきます。私は当該Wikiの管理人ではありませんが、管理人からの許可を頂いた上で、移転に向けた手続きを進めています。管理人の手の届かない所で進められている話ではないという事を補足しておきます。 -- 投稿者? 2023-01-31 (火) 19:10:53