10 分钟跑通你的第一个 TransformersTransformers-Tutorials 上百个 HuggingFace Notebook 实战指南【免费下载链接】Transformers-TutorialsThis repository contains demos I made with the Transformers library by HuggingFace.项目地址: https://gitcode.com/GitHub_Trending/tr/Transformers-Tutorials听过 Transformer 名词、却从没真正跑通过一个模型这个 Transformers 教程仓库 Transformers-Tutorials 一次解决100 个 HuggingFace Transformers 实战 Notebook全部基于 PyTorch由 HuggingFace 核心贡献者 Niels Rogge 维护——DETR、ViT 等多个模型正是他亲手写进官方库的。文本、图像、视频、文档全覆盖克隆下来就开始按 ShiftEnter。谁适合读这篇如果你只读过论文、没跑过一行代码从这篇开始如果你微调第一个模型卡在报错上对照对应目录的训练示例如果你想上手 LLaVA、BLIP-2 这类多模态模型每个都有专属 notebook10 分钟上手从克隆到第一次推理整条路径就四步克隆 → 装依赖 → 打开任意 .ipynb → 依次 ShiftEnter。每个 notebook 都以最轻量的推理开场跑起来立刻有结果。git clone https://gitcode.com/GitHub_Trending/tr/Transformers-Tutorials cd Transformers-Tutorials pip install transformers datasets torch仓库按模型分目录组织BERT/、DETR/、LayoutLMv3/、LLaVa/ 一个模型一个文件夹想学什么直接进对应目录。先打开 BERT/Custom_Named_Entity_Recognition_with_BERT.ipynb核心代码就是这几行from transformers import BertTokenizerFast, BertForTokenClassification, pipeline tokenizer BertTokenizerFast.from_pretrained(dslim/bert-base-NER) model BertForTokenClassification.from_pretrained(dslim/bert-base-NER) nlp pipeline(ner, modelmodel, tokenizertokenizer) print(nlp(Hugging Face is a company based in New York City))输出是带 B-ORG/B-LOC 标签的词元列表。这就是 Transformers 里最基础的序列标注套路跑通这一个剩下 80% 的教程都是它的变体。本地没有 GPU 也没关系notebook 顶部都有 Open in Colab 徽章一键切到免费 GPU代码完全一样。按你的目标挑一条路线跑通目标推荐 Notebook预计耗时文本分类 / 命名实体识别BERT NER 微调 / 多标签文本分类_for_multi_label_text_classification.ipynb) / CANINE 在 IMDb 上跑情感.ipynb)12 天图像分类 / 分割 / 检测ViT 在 CIFAR-10 上微调 / SegFormer 自定义数据集分割 / DETR 气球数据集检测.ipynb)23 天多模态文档 / 视觉问答 / 对话LayoutLMv3 在 FUNSD 上做词元分类.ipynb) / LLaVA 多模态生成推理 / BLIP-2 对话35 天建议先挑一个你有把握跑完的贪多反而容易烂尾。DETR/ 目录下带 minimal_example 的 notebook 是最轻量的入口。另外每个模型目录基本都有推理版和微调版两档先读推理版再读微调版卡住了你能立刻定位问题出在哪一步。三个高频场景输入是什么、输出是什么、后处理怎么拼文档理解给 LayoutLMv3 三样东西——文档图片、OCR 出来的词、每个词的框坐标你可以理解成给图片做分词。模型给每个词打一个标签把连续同标签的词拼起来就得到标题/日期/金额这类实体。注意词和坐标来自你的 OCR 输出processor 负责把图片、词、框逐一对齐后喂给模型。目标检测DETR 系模型输入一张图输出框坐标、类别、置信度三个列表。它是端到端方案没有锚点、不用 NMS后处理只剩按阈值过滤再换算回原图尺寸results processor.post_process_object_detection(outputs, threshold0.9)[0] # 每项含scores(置信度)、labels(类别)、boxes(x1, y1, x2, y2)气球数据集只有几百张图一张消费级显卡就够微调是作者讲自定义检测数据集的招牌例子。视觉问答ViLT 吃一张图加一个问题吐出答案 token 序列解码成文字即可。关键点在数据侧问题走文本 tokenizer图片走图像处理器两路拼在一起才进模型。想深入的话ViLT/ 目录里还有微调、掩码语言建模和图文检索的完整示例。踩坑清单症状 → 一招解决显存爆先砍 batch size再用 gradient_accumulation_steps 补有效批量fp16 出 NaN先查学习率5e-5 是安全值大模型改 bf16Colab 免费 GPU 断连每几个 step 存一次 checkpoint别等训练完大数据集加载慢用 datasets 的内存映射别一次性全量读入往深里走想再深一层README.md 里作者对三种训练框架原生 PyTorch / Lightning / Trainer的取舍讲解值得读YOLOS/create_balloon_hf_dataset.py 演示了原始数据集怎么转成 HF imagefolder 格式学完再回官方文档补 API 细节。【免费下载链接】Transformers-TutorialsThis repository contains demos I made with the Transformers library by HuggingFace.项目地址: https://gitcode.com/GitHub_Trending/tr/Transformers-Tutorials创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考
10 分钟跑通你的第一个 TransformersTransformers-Tutorials 上百个 HuggingFace Notebook 实战指南【免费下载链接】Transformers-TutorialsThis repository contains demos I made with the Transformers library by HuggingFace.项目地址: https://gitcode.com/GitHub_Trending/tr/Transformers-Tutorials听过 Transformer 名词、却从没真正跑通过一个模型这个 Transformers 教程仓库 Transformers-Tutorials 一次解决100 个 HuggingFace Transformers 实战 Notebook全部基于 PyTorch由 HuggingFace 核心贡献者 Niels Rogge 维护——DETR、ViT 等多个模型正是他亲手写进官方库的。文本、图像、视频、文档全覆盖克隆下来就开始按 ShiftEnter。谁适合读这篇如果你只读过论文、没跑过一行代码从这篇开始如果你微调第一个模型卡在报错上对照对应目录的训练示例如果你想上手 LLaVA、BLIP-2 这类多模态模型每个都有专属 notebook10 分钟上手从克隆到第一次推理整条路径就四步克隆 → 装依赖 → 打开任意 .ipynb → 依次 ShiftEnter。每个 notebook 都以最轻量的推理开场跑起来立刻有结果。git clone https://gitcode.com/GitHub_Trending/tr/Transformers-Tutorials cd Transformers-Tutorials pip install transformers datasets torch仓库按模型分目录组织BERT/、DETR/、LayoutLMv3/、LLaVa/ 一个模型一个文件夹想学什么直接进对应目录。先打开 BERT/Custom_Named_Entity_Recognition_with_BERT.ipynb核心代码就是这几行from transformers import BertTokenizerFast, BertForTokenClassification, pipeline tokenizer BertTokenizerFast.from_pretrained(dslim/bert-base-NER) model BertForTokenClassification.from_pretrained(dslim/bert-base-NER) nlp pipeline(ner, modelmodel, tokenizertokenizer) print(nlp(Hugging Face is a company based in New York City))输出是带 B-ORG/B-LOC 标签的词元列表。这就是 Transformers 里最基础的序列标注套路跑通这一个剩下 80% 的教程都是它的变体。本地没有 GPU 也没关系notebook 顶部都有 Open in Colab 徽章一键切到免费 GPU代码完全一样。按你的目标挑一条路线跑通目标推荐 Notebook预计耗时文本分类 / 命名实体识别BERT NER 微调 / 多标签文本分类_for_multi_label_text_classification.ipynb) / CANINE 在 IMDb 上跑情感.ipynb)12 天图像分类 / 分割 / 检测ViT 在 CIFAR-10 上微调 / SegFormer 自定义数据集分割 / DETR 气球数据集检测.ipynb)23 天多模态文档 / 视觉问答 / 对话LayoutLMv3 在 FUNSD 上做词元分类.ipynb) / LLaVA 多模态生成推理 / BLIP-2 对话35 天建议先挑一个你有把握跑完的贪多反而容易烂尾。DETR/ 目录下带 minimal_example 的 notebook 是最轻量的入口。另外每个模型目录基本都有推理版和微调版两档先读推理版再读微调版卡住了你能立刻定位问题出在哪一步。三个高频场景输入是什么、输出是什么、后处理怎么拼文档理解给 LayoutLMv3 三样东西——文档图片、OCR 出来的词、每个词的框坐标你可以理解成给图片做分词。模型给每个词打一个标签把连续同标签的词拼起来就得到标题/日期/金额这类实体。注意词和坐标来自你的 OCR 输出processor 负责把图片、词、框逐一对齐后喂给模型。目标检测DETR 系模型输入一张图输出框坐标、类别、置信度三个列表。它是端到端方案没有锚点、不用 NMS后处理只剩按阈值过滤再换算回原图尺寸results processor.post_process_object_detection(outputs, threshold0.9)[0] # 每项含scores(置信度)、labels(类别)、boxes(x1, y1, x2, y2)气球数据集只有几百张图一张消费级显卡就够微调是作者讲自定义检测数据集的招牌例子。视觉问答ViLT 吃一张图加一个问题吐出答案 token 序列解码成文字即可。关键点在数据侧问题走文本 tokenizer图片走图像处理器两路拼在一起才进模型。想深入的话ViLT/ 目录里还有微调、掩码语言建模和图文检索的完整示例。踩坑清单症状 → 一招解决显存爆先砍 batch size再用 gradient_accumulation_steps 补有效批量fp16 出 NaN先查学习率5e-5 是安全值大模型改 bf16Colab 免费 GPU 断连每几个 step 存一次 checkpoint别等训练完大数据集加载慢用 datasets 的内存映射别一次性全量读入往深里走想再深一层README.md 里作者对三种训练框架原生 PyTorch / Lightning / Trainer的取舍讲解值得读YOLOS/create_balloon_hf_dataset.py 演示了原始数据集怎么转成 HF imagefolder 格式学完再回官方文档补 API 细节。【免费下载链接】Transformers-TutorialsThis repository contains demos I made with the Transformers library by HuggingFace.项目地址: https://gitcode.com/GitHub_Trending/tr/Transformers-Tutorials创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考
