17 ポイント 投稿者 xguru 2024-06-13 | まだコメントはありません。 | WhatsAppで共有
  • マルチページWebアプリをZipファイルにクロールし、そのまま配信可能なMulti-Page Application(MPA) Archiver
  • mpa http://example.net を実行すると、ヘッドレスPuppeteerを使って再帰的にクロール(CPU数 / 2 本のスレッドを使用)
  • Sitemapを取得してシードポイントとして使用
  • サイトのURLのみをクロールするが、外部リソースも fetch する
  • サイトのリソースをすべて保存
  • mpa/sitemap.txtmpa/sitemap.xml を生成
  • 中断された場合は再開可能。URL 250件ごとにチェックポイントを保存
  • SPAの場合、--spa オプションで元のHTMLを保存可能

まだコメントはありません。

まだコメントはありません。