加载中...

SUPPORT

觉得内容有帮助？请站长喝杯咖啡 ☕

网站所有内容免费，但运维不免费 😭 AI、服务器、域名……你的支持将用来维持网站正常运行，让这个小站还能继续写下去~

微信赞助收款二维码

打开微信扫一扫 · 金额随意

首页知识库教程工具博客资讯术语表面试题库关于?个人中心

← 返回课程

动手学LLM

4 / 20·markdown

Codes

01Python 设置提示
02本书使用的库
03第2章：处理文本数据
04第2章:使用文本数据
05第2章:使用文本数据
06Chapter 3: Coding Attention Mechanisms
07Chapter 4: Implementing a GPT model from Scratch To Generate Text
08Chapter 5: 使用未标记数据进行预训练
09Alternative Weight Loading
10Pretraining GPT on the Project Gutenberg Dataset
11Adding Bells and Whistles to the Training Loop
12Optimizing Hyperparameters for Pretraining
13第 6 章：用于文本分类的微调
14额外实验
15对 50k IMDB 电影评论的情感进行分类的附加实验
16Chapter 7: Finetuning to Follow Instructions
17Chapter 7: Finetuning to Follow Instructions
18Chapter 7: Finetuning to Follow Instructions
19Chapter 7: Finetuning to Follow Instructions
20Generating a Dataset for Instruction Finetuning

Chapter 04

第2章:使用文本数据

第2章:使用文本数据

compare-bpe-tiktoken.ipynb 对各种字节对编码实现进行基准测试
bpe_openai_gpt2.py 是OpenAI使用的原始字节对编码器代码

上一章

第2章：处理文本数据

下一章

第2章:使用文本数据

本页镜像自上游仓库，固定版本 6ca2631b。许可证：MIT License。原文只读，笔记与划线保存在你的助记词身份下。

阅读进度

0%

整课进度0/20 章 · 0%

快捷键：←/→ 换章 · C 完成 · F 专注 · Esc 退出

阅读设置

字号

行宽

行距

本章笔记

选中正文可划线或写笔记。随助记词身份同步，仅自己可见。

暂无笔记。选中一段文字试试。

本章导航

中文 AI 学习与实践平台。知识库、教程、工具与资讯集中一站，帮你把人工智能真正学到手。

联系support.aimaster.cc@gmail.com

意见反馈 · 内容纠错 · 需求交流

探索

知识库
教程
工具
博客
资讯
术语表
面试题库
关于我们

专题

精选教程
机器学习
深度学习
自然语言处理
计算机视觉

© 2026 AI Master. All rights reserved.

精通人工智能 · ai-master.cc