antinet-doc-parse
Solid软件开发工程师与数据科学家在构建RAG系统时,当需处理PDF/Word/Excel等多格式复杂文档,用此技能可自动触发三级解析降级,一键输出高置信度结构化Markdown与元数据,免去繁琐清洗,直接夯实企业知识库数据底座!
Data & Documents 6,537 stars
625 forks Updated today
Install
Quality Score: 84/100
Stars 20%
Recency 20%
Frontmatter 20%
Documentation 15%
Issue Health 10%
License 10%
Description 5%
Skill Content
# 多格式文档解析 Skill(密卷房)
## 使用方式
- 由密卷房 Worker 在收到已通过安全扫描的文件时调用。
- 三级 fallback 依次尝试,输出最终结构化结果与置信度。
## 输入(Input)
- `file_path`:已通过 security-scan 的本地文件路径
- `formats`:(可选)期望支持的格式白名单,默认全格式
## 输出(Output)
- `markdown`:结构化 Markdown 正文
- `metadata`:标题、页数、表格数、作者等元数据
- `confidence`:0–1 解析置信度
- `fallback_used`:最终生效的解析器名称
## 依赖(Dependencies)
- MinerU(首选,强排版还原)
- PyMuPDF(次选,PDF 快速解析)
- pdfplumber(兜底,表格/文本抽取)
- `python-magic`(类型探测)
## 失败处理(Failure Handling)
- 主解析器失败 → 自动降级到下一档,直到全部尝试。
- 三级全部失败 → 标记 `人工介入`,不输出残缺结果,回传 BLOCKED 给军机处。
- 单页超大文件 → 分块解析后拼接,避免内存溢出;块级失败仅标记该块低置信度。
## 复用价值(Reuse Value)
- 通用解析底座:RAG 索引、企业知识库、合同结构化均可直接复用。
- 置信度透明:下游(通政司四色卡片)可据此决定是否需要人工复核,降低幻觉风险。
## 复赛代码包执行(runnable package)
- 真实入口:`scripts/run_doc_parse.py`
- 执行等价于 `core.runtime.AgentSession.run_stage("doc-parse")`,调用 `archive.mijuanfang.MiJuanFangAgent`(三级解析 fallback,纯 Python 可离线)。
- 运行:`python skills/doc-parse/scripts/run_doc_parse.py`
- 产物:`examples/snse_survey/skill_outputs/doc_parse.json`(解析结果 + 置信度 + fallback 信息)。
Details
- Author
- anbeime
- Repository
- anbeime/skill
- Created
- 7 months ago
- Last Updated
- today
- Language
- Python
- License
- None
Similar Skills
Semantically similar based on skill content — not just same category
Data & Documents Solid
doc-parse
将 PDF/PPT/Excel/Word 等多格式文档解析为结构化 Markdown,并输出元数据与解析置信度,作为 RAG 与四色卡片的数据底座。
6,537 Updated today
anbeime Data & Documents Solid
antinet-security-scan
信息安全分析师与软件开发工程师在搭建文档处理流水线时,当需要拦截违规文件或外部URL,请挂载此技能作为强制前置安检,自动输出 pass/reject 判定与详细合规扫描报告,一键守住零信任安全底线。
6,537 Updated today
anbeime Data & Documents Listed
sft-rag-pipeline
从一批企业文档(PDF/Word/Markdown/PPT)出发,搭建 SFT+RAG 混合问答系统的完整流水线——文档抽取、分块建索引、检索调优、微调数据生成、LoRA 训练、双层评测、迭代。当用户要"用这些文档训一个模型""做企业知识库问答""微调一个内部助手""搭 RAG"时使用。内含大量踩坑记录,可显著降低返工。
1 Updated 1 weeks ago
gznywjc