郝彦飞 MinerU:一站式开源高质量数据提取工具,支持PDF/网页/多格式电子书提取。 MinerU是一款将PDF转化为机器可读格式的工具(如markdown、json),可以很方便地抽取为任意格式。 主要功能 删除页眉、页脚、脚注、页码等元素,保持语义连贯 对多栏输出符合人类阅读顺序的文本 保留原文档的结构,包括标题、段落、列表等 提取图像、图片标题、表格、表格标题 自动识别文档中的公式并将公式转换成latex 自动识别文档中的表格并将表格转换成latex 乱码PDF自动检测并启用... AGPL-3.0开源 信息挖掘 底层工具
郝彦飞 wiseflow:信息挖掘 AI 神器,省时高效 首席情报官 (Wiseflow)是一个敏捷的信息挖掘工具,可以从网站、微信公众号、社交平台等各种信息源中按设定的关注点提炼讯息,自动做标签归类并上传数据库。 功能特色 🚀 原生 LLM 应用 我们精心选择了最适合的 7B~9B 开源模型,最大化降低使用成本,且利于数据敏感用户随时完全切换至本地部署。 🌱 轻量化设计 不用任何向量模型,系统开销很小,无需 GPU,适合任何硬件环境。 🗃️ 智能信息提... 信息挖掘 底层工具 开源