| ページ | 不具合報告 |
|---|
| サマリ | |
|---|
| 投稿者 | 名無し? |
|---|
| 状態 | |
|---|
| 投稿日 | 2023-01-14 (土) 14:18:37 |
|---|
質問 †
Wikiのデータをダンプしたいです。
しかしWikihouseはダンプコマンドが無効化されていると聞きましたが本当ですか？
どうしてもダンプデータが必要です。お願いします。
回答 †
- ダンプの目的を教えて頂けますでしょうか？ -- WikiHouse
- お世話になっております、この報告の投稿者とは別人になりますが、代わりに事情を説明させて頂きます。
大変言いにくい事にはなりますが、この度、『太鼓の達人 譜面とかWiki』を、WikiHouseから別のレンタルWikiサービスに移転する運びとなりました。移転先として有力視されているレンタルWikiサービスでは、PukiWikiのダンプデータを基にして移転支援を行っており、そのためにダンプデータをご提供頂けないかという話になっております。
大変恐れ入りますが、対応をご検討頂けますと幸甚に存じます。 --
- お世話になっております。1個上の書き込みをした者です。移転予定先からの回答があり、ダンプファイルの取得が厳しいようであれば、移転元のサイトから機械的にデータの取得を行う事も可能との回答がありました。WikiHouseからの機械的なデータ取得を行っても差し支えございませんでしょうか。大変恐れ入りますが、前向きにご検討頂けますと幸甚に存じます。 --
- P.S. なお、Wikiの利用者に移転の是非について問うたアンケートの結果がこちらになります。今後、より魅力あるサービスを運営される際に参考にして頂ければと思います。 --
- P.S. 今週火曜日から回答が無いため、念のためメールでもご連絡を差し上げております。このコメント欄もしくはメール、いずれかでご回答頂けますと幸いです。 --
- P.S. エラーメールが返って来てしまったため、念のため、新規トピックを立ち上げました。不具合報告/432の方でご回答頂ければと思います。 --
- 回答が遅れまして申し訳ありません。アンケートに挙がっているご意見については善処していきたいと存じます。スクレイピングはサーバーへの負荷も大きく、他のWikiの方にご迷惑もかかりますので、ご遠慮願います。 -- WikiHouse
- ご連絡ありがとうございます。スクレイピング禁止の旨、承知致しました。ダンプデータの取得に対してはご対応頂けますでしょうか？（管理人以外の第三者にダンプデータを送信するのはコピーWiki乱立の懸念があると思いますので、管理人にダンプデータを送信する形で構いません） --
- P.S. 現在はPukiWikiのdumpプラグインが無効化されているようですので、dumpプラグインを有効にするか、ダンプファイルを管理人に送信するか、いずれかのご対応を頂ければ幸甚に存じます。 --
- 大変申し訳ありませんが、移転につきましてはご対応いたしかねます。サービス改善に努めてまいりますので、今後ともよろしくお願いいたします。 -- WikiHouse
- 了解しました。 --
- 何度も申し訳ございません。
移転予定先より「スクレイピングにつきましては、負荷がかかりません。 人力で作業するよりも緩やかにデータを取得することができます。」という回答がありました。なお、当該Wikiの移転に関してはほぼ確定的な情勢で、スクレイピングが行えない場合は、人力での作業を予定しております。
つきましては、重ね重ね申し訳ございませんが、Wikiのサーバーと利用者、双方の負担を和らげるため、スクレイピングによるデータ取得を認めて頂きたく、お願い申し上げます（許可さえ頂ければ、そちらでの特別な対応は不要です）。 --
- P.S. スクレイピングのペースは数秒間に1ページのレベルとの事です（10秒で1ページなど）。また、スクレイピングは編集ページのテキストエリアをターゲットにするとの事で、記事のHTMLコンバートがほぼ発生しないため、記事閲覧より負荷が掛からないとの事です。
繰り返しにはなりますが、当該Wikiの移転に関してはほぼ確定的な情勢で、スクレイピングが行えない場合は、人力での作業を予定しております。つきましては、Wikiのサーバーと利用者、双方の負担を和らげるため、スクレイピングによるデータ取得を認めて頂きたく、お願い申し上げます。 --
- ↑上記いかがでしょうか？
「サーバーへの負荷が大きい」という理由でスクレイピングを断っていましたが、上記の通りサーバーに負荷がかからない形であれば認めて頂けないでしょうか？ --
- 念のため新規トピックとして不具合報告/433を立ち上げましたため、こちらはクローズとします。 --
