智能感知 · 組件
定時新聞與訂閲源採集去重
可用 合成數據 T3 · 信號流與告警
功能
輪詢 RSS/API 訂閲源，保留抓取狀態，並在四個來源變體間對文章去重。來源註冊表、客戶分類體系以及各適配器的行為需要另行配置。
核心模式
定時拉取資訊源＋去重和抓取狀態
- 輸入
- RSS/RSSHub/JSON feeds
- 輸出
- Normalized articles, source provenance and fetch job records
關鍵參數
| 名稱 | 類型 | 預設值 | 取值 |
|---|---|---|---|
| sources | array | [] | — |
| poll_interval_seconds | integer | 900 | 30–86400 |
| batch_size | integer | 50 | 1–1000 |
| parallelism | integer | 4 | 1–64 |
| dedupe_strategy | string | hybrid | canonical_url · external_id · title_content · hybrid |
成熟度與限制
可用
已建立來源註冊表、適配器契約、調度器及抓取和管理接口。此等級依據靜態源碼檢查，不代表運行測試、真實服務接入或生產部署已通過驗證。
未發現根目錄複用許可證；出版方文字與圖片須取得複用權，外部模型及抓取服務須配置。各變體的依賴、限制及較低成熟度分別記錄；它們是備選實現，並非一個已部署系統。
所在流水線
技能包
契約腳手架與確定性模擬實現
下載 · 13KBSHA-256 5d1958a1f05a0e2fc1b04ef1e81beb4a7ca32d90a7475590f7f6870fd069fb8c
