shub-workflow
scrapinghub/shub-workflow
This skill provides instructions for utilizing the `scanjobs` tool from `shub-workflow` to scan, extract, and plot data from ScrapyCloud jobs.
Overview
The scanjobs-programs skill helps developers build and execute command lines or configure predefined PROGRAMS dictionaries in scanjobs.py scripts. It details patterns for extracting statistics, log lines, items, or spider arguments, using postscript post-processors, and plotting trends using the built-in mini-language.
Capabilities
- ▸Scans ScrapyCloud jobs for stats, logs, items, and spider arguments via regex
- ▸Authoring and editing PROGRAMS shortcuts with variable interpolation
- ▸Post-processing extracted numbers and rendering plots using the built-in mini-language
Best for
Building and formatting scanjobs command lines for ScrapyCloud jobs, Configuring PROGRAMS dictionaries for shortcut execution within project scripts, Extracting and plotting monitor stats and crawl metrics over time
Works with
実タスクにどれだけ役立つか(機能の豊富さ・用途の明確さ)。 — AIによるcapabilities/use-cases解析
実装・指示の品質。 — AIによるSKILL.md/README解析
リポジトリがどれだけ活発に保守されているか。 — GitHub 最終push日時の新しさ
ドキュメントの充実度・分かりやすさ。 — README/独自要約の情報量
危険・不審な挙動が無いか。 — AIによるセキュリティレビュー
ありふれたラッパーではない独自性。 — AIによる独自性判定
コミュニティの採用度。 — GitHub Stars/Forks(対数スケール)
対応AIエージェントの広さ。 — AIによる対応エージェント判定
ライセンス不明/制限あり(Red)のSkillは総合スコアに0.85倍の補正を適用します。 ランキングはこのScoreのみで決まり、広告で変わりません。 算出方法の詳細 →
Security considerations
Ensure command line parameters and variable interpolations do not inject untrusted user input into shell execution contexts.
Categories
Summary and analysis are original content generated by AI Skills Rank. The skill's source text is not reproduced here — view it on the linked repository.