Scrapy
latest

入門

  • Scrapyを３行で説明シル
  • インストール ガイド
  • Scrapyチュートリアル
  • 例

基本の概念

  • コマンドラインツール
  • スパイダー
  • セレクター
  • アイテム
  • アイテム・ローダー
  • Scrapyシェル
  • アイテム・パイプライン
  • フィード・エクスポート
  • リクエストとレスポンス
  • リンク抽出器(extractor)
  • 設定
  • 例外(Exceptions)

組み込み済サービス群

  • ロギング(logging)
  • 統計をとる
  • 電子メールの送信
  • Telnetコンソール
  • Webサービス

特定の問題の解決

  • F.A.Q.(よくある質問と回答)
  • スパイダーのデバッグ
  • スパイダー コントラクト
  • よくある例
  • 広範なクロール
  • Webブラウザの開発ツールを使ってスクレイピングする
  • 動的に読み込まれたコンテンツの選択
  • メモリ・リークのデバッグ
  • ファイルと画像のダウンロードおよび処理
  • スパイダーのデプロイ
  • AutoThrottle拡張機能
  • ベンチマーキング
  • ジョブ制御: クロールの一時停止と再開

Scrapyの拡張

  • アーキテクチャ概観
  • ダウンローダー・ミドルウェア
  • スパイダー・ミドルウェア
  • 拡張機能
  • コアAPI
  • シグナル
  • アイテム・エクスポーター

その他すべて

  • リリース・ノート
  • Scrapyへの貢献
  • バージョン管理とAPIの安定性
Scrapy
  • Docs »
  • 検索
  • Edit on GitHub

© Copyright 2008–2018, Scrapy developers Revision a8134fa2.

Built with Sphinx using a theme provided by Read the Docs.