发布时间:2026/8/29 10:17:10
MinerU:快速把 PDF 和 Office 文档转成 LLM 可用的 Markdown,4 条路径覆盖纯 CPU 到多卡环境 MinerU快速把 PDF 和 Office 文档转成 LLM 可用的 Markdown4 条路径覆盖纯 CPU 到多卡环境【免费下载链接】MinerUTransforms complex documents like PDFs and Office docs into LLM-ready markdown/JSON for your Agentic workflows.项目地址: https://gitcode.com/GitHub_Trending/mi/MinerUMinerU 是一个开源文档解析工具把 PDF、图片、DOCX、PPTX、XLSX 转成结构化 Markdown 和 JSON公式还原成 LaTeX表格转 HTML自动去除页眉页脚和页码输出可直接喂给 LLM、RAG 管线。这篇文章按本机快速跑通、有显卡要加速、没显卡走远程、多机分摊任务四种环境分别给出最短路径并说明首次运行出错时该查哪里。一、本机第一次跑通装依赖、解析一个文件、核对输出用一行命令装好依赖先装 uv比 pip 更快的包管理器再装 core 依赖它包含 VLM 和 pipeline 两种解析后端不含 vllmuv pip install mineru[core]机器有 8G 以上显存的 NVIDIA 显卡时直接装全量更省事uv pip install mineru[all]解析第一个 PDF首次运行会自动下载模型并缓存所以第一遍会比较慢。默认后端是 hybrid-engine大模型 VLM 加小模型分工协作没有显卡就加-b pipeline走纯 CPU 路线mineru -p demo/pdfs/demo1.pdf -o output注mineru命令在不传--api-url时会先自动拉起一个本地临时的 mineru-api 服务再执行解析首次运行感觉慢是正常的属预期行为。输出目录里会生成 Markdown、按阅读顺序排列的 JSON 和图片裁剪文件。对照下图的版面框选结果可以确认文本块、表格、公式是否都识别到位整条链路是输入文档 → 版面识别 → 内容抽取文本 / 公式 / 表格→ Markdown 与 JSON 输出模型下载不下来怎么办模型默认从 HuggingFace 拉取国内网络不通时切换到 ModelScope 源export MINERU_MODEL_SOURCEmodelscope二、显存 8G 以上的显卡怎么用上显卡是 Volta 及以后架构例如 V100、20/30/40 系且显存 8G 起时VLM 引擎能给到最高解析精度。Linux 下安装 vllm 推理框架高吞吐大模型推理引擎uv pip install mineru[core,vllm]注vllm 和 lmdeploy 二选一不建议同时安装Windows 用户选 lmdeploy。装完直接跑解析命令即可无需额外配置mineru -p input.pdf -o output -b hybrid-engine精度不够时加--effort high切换高强度解析默认 medium 档更快但不支持图片/图表分析。自动检测显存不准时可用环境变量覆盖export MINERU_DEVICE_MODEcuda export MINERU_VIRTUAL_VRAM_SIZE16三、没有显卡轻量客户端连远程服务机器只有 CPU 和网络时装基础包即可不含 torch很轻重计算放到远端。在一台有显卡的机器上启动 OpenAI 兼容推理服务mineru-openai-server --port 30000CPU 机器上装轻量客户端并指定服务地址uv pip install mineru mineru -p input.pdf -o output -b vlm-http-client -u http://server-ip:30000如果远端跑的是通用 API 服务而非 VLM 端点用 mineru-api 配合--api-url直连mineru-api --host 0.0.0.0 --port 8000 mineru -p input.pdf -o output --api-url http://server-ip:8000四、多 GPU 或多台机器怎么分摊任务批量生产环境用mineru-router做统一入口它会自动按本地 GPU 拉起 worker或聚合多个已有 mineru-api 实例做负载均衡mineru-router --host 0.0.0.0 --port 8002 --local-gpus auto已有服务可以显式指定上游mineru-router --port 8002 \ --upstream-url http://gpu-1:8000 \ --upstream-url http://gpu-2:8000接口与 mineru-api 完全一致支持POST /tasks异步提交和POST /file_parse同步解析客户端只需要把入口地址换过来。五、首次运行常见的三个坑查哪里Linux 上结果缺字、中文显示异常多数不是解析问题而是系统缺 CJK 字体导致 PDF 渲染成图片时丢字。安装fonts-noto-cjk后执行fc-cache -fv即可详见 FAQdocs/zh/faq/index.md。⚠️显存不够或推理慢改-b pipeline回退到 CPU 可用方案精度略低4G 显存即可客户端模式想压显存调小MINERU_HYBRID_BATCH_RATIO8G 设 8、4G 设 4、2G 设 1。模型下载失败或超时先确认MINERU_MODEL_SOURCE设置正确第二次运行起直接走本地缓存。指定本地模型目录的方法在docs/zh/usage/model_source.md。更多参数跑mineru --help可看全量选项环境变量完整列表在docs/zh/usage/cli_tools.md。按自己的环境选定一条部署路径后就可以把解析产物接进自己的 RAG 或 Agent 流程了。【免费下载链接】MinerUTransforms complex documents like PDFs and Office docs into LLM-ready markdown/JSON for your Agentic workflows.项目地址: https://gitcode.com/GitHub_Trending/mi/MinerU创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

相关新闻

2026/8/29 10:17:10

BlueNRG协处理器模式详解:STM32+SPI实现低功耗蓝牙从机开发

1. 先搞清楚BlueNRG的协处理器到底是个什么角色1.1 从BlueNRG家族说起BlueNRG系列是意法半导体(ST)推出的低功耗蓝牙(BLE)SoC产品线,目前主流的有两代:第一代BlueNRG-1和第二代BlueNRG-2。单看这颗芯片本身…

2026/8/29 10:32:11

基于ROS2的智能扫地机器人:从SLAM建图到Nav2导航全流程实战

简介:本资源是面向高校机器人方向课程设计与毕业设计的ROS2实战项目,聚焦自主导航与清扫功能集成,适用于具备Linux基础与ROS入门知识的学习者。压缩包共68个文件(117KB),涵盖29个Python节点脚本&#xff08…

2026/8/29 10:32:11

DriveTeach-VLA:图像轨迹如何破解自动驾驶预训练难题

最近做自动驾驶多模态模型方向的项目时,我一直在思考一个问题:VLA(Vision-Language-Action,视觉-语言-动作)模型虽然火,但真正放到自驾场景里做规模扩展,总是会遇到“预训练阶段越训越偏”的尴尬…

2026/8/29 10:32:11

RAG检索精度0.6卡了两周,把chunk策略搬进Lambda后冲到0.91

RAG检索精度0.6卡了两周,把chunk策略搬进Lambda后冲到0.91 发版那天下午,产品经理把一张截图甩到群里--用户问「供应商付款账期」,系统答的是我们两家子公司合并前的旧条款。这已经不是第一次了。上线三周,企业知识库问答的幻觉率稳在31%,客户满意度跌到新低。 我翻出项目启动…

2026/8/29 10:27:10

Hoppscotch 本地部署教程:免费开源 API 测试平台从零跑通

Hoppscotch 本地部署教程:免费开源 API 测试平台从零跑通 【免费下载链接】hoppscotch Open-Source API Development Ecosystem • https://hoppscotch.io • Offline, On-Prem & Cloud • Web, Desktop & CLI • Open-Source Alternative to Postman, Inso…

2026/8/28 16:16:17

[光学原理与应用-521]:对光的错误理解与纠偏

首先光是一种能量的载体和形态,宏观上观察到的光是由无数个微观的光量子组成的,每个光子在产生的瞬间,其在真空的空间中以确定不变的速度沿着一个初始的方向一直向前,在微观层面,每个光量子的运动轨迹是以波函数所展现…

2026/8/28 16:16:21

SIP通话转接原理与REFER方法实战解析

1. 通话转接不是“挂断再拨号”,而是SIP会话的动态重定向你有没有遇到过这样的场景:客服坐席A正在和客户通电话,突然需要把这通对话无缝转给专家坐席B,客户完全感知不到中间的断连——既没听到忙音,也没被要求重新拨号…

2026/8/28 16:16:22

Kolla-ansible单节点OpenStack部署实战:从环境准备到排坑指南

1. 为什么选择Kolla-ansible来部署单节点OpenStack?如果你正在寻找一种能把OpenStack从“概念”快速变成“可用的实验环境”的方法,那么Kolla-ansible几乎是当前最主流、最省心的选择。我见过太多人卡在手动编译依赖、配置服务、处理版本冲突的泥潭里&am…

2026/8/29 0:01:10

etc目录下的profile.d文件目录设置环境变量和全局脚本shell

一、设置环境变量etc目录下的profile.d文件目录 /etc/profile.d1、编写 vi test.sh文件内容# jdk变量 export ZHK_HOME/root export PATH$PATH:$ZHK_HOME/test # 可以取出来ZHK_HOME变量给ZZZ_HOME赋值 export ZZZ_HOME${ZHK_HOME}/test2、刷新 执行source /etc/profile 命令使…

2026/8/29 0:01:10

【JavaScript】内存管理-垃圾回收机制-内存泄露

内存管理 C 语言这样的底层语言一般都有底层的内存管理接口,比如 malloc()和free()。 而 JavaScript 是在创建变量(对象,字符串等)时自动进行了分配内存,并且在不使用它们时“自动”释放。释放的过程称为垃圾回收。 整…

2026/8/29 0:01:10

Labgrid-MCP:为嵌入式硬件实验室接入AI Agent操控能力

Labgrid-MCP 的目标是把 MCP(Model Context Protocol)能力延伸到真实嵌入式硬件实验室:AI Agent 通过一个标准化的 MCP Server,就能查看目标板状态、控制上电断电、复位开发板、读取串口日志,甚至执行镜像刷写。对于经…

2026/8/28 16:16:48

实测才敢推 AI论文网站 2026最新测评与推荐

2026年真正好用的AI论文网站,核心看生成的论文质量、低AI味、格式正确、学术适配四大指标。综合实测,千笔AI、ThouPen、豆包、DeepSeek、Grammarly 是当前最值得推荐的梯队,覆盖从免费到付费、从中文到英文、从文科到理工的全场景需求。一、综…

2026/8/28 16:16:50

2026必备!AI论文网站测评:最新推荐与深度对比

2026年真正好用的AI论文网站,核心看生成的论文质量、低AI味、格式正确、学术适配四大指标。综合实测,千笔AI、ThouPen、豆包、DeepSeek、Grammarly 是当前最值得推荐的梯队,覆盖从免费到付费、从中文到英文、从文科到理工的全场景需求。 一、…

2026/8/28 11:06:45

摆脱论文困扰!盘点2026年全网爆红的的AI论文写作工具

一天写完毕业论文在2026年已不再是天方夜谭。2026年最炸裂、实测能大幅提速的AI论文写作工具,覆盖选题构思、文献整理、内容生成、格式排版等核心场景,真正帮你高效搞定论文难题。 一、全流程王者:一站式搞定论文全链路(一天定稿首…