2026 03 02 HackerNews

MicroGPT是Andrej Karpathy开发的极简GPT系统，仅用200行Python代码实现。

该项目展示了大型语言模型的核心机制，强调深度学习的简洁与优雅。

MicroGPT包含文本数据集加载、字符级分词器、自动微分引擎等完整模块。

模型通过学习32,000个英文名字的字符分布模式，能够生成新的虚构名字。

自动微分引擎是项目的技术核心，支持基本运算并完成反向传播。

整个系统在无外部依赖的前提下，实现了完整的端到端训练与生成流程。

该作品体现了Karpathy对深度学习本质的深刻理解与极简主义追求。

有人将MicroGPT修改为生成韩语名字，并制作了可视化网页，提供互动体验。

有人用C++重写了MicroGPT，速度提升10倍，难点在于如何实现Value类。

有人提出为LLM输出添加置信度评分，但模型的置信度并不一定准确。

真实的理解来自婴儿成长过程中的多感官、多动作、多反馈的交互式学习。

人类与LLM在间接知识获取方面并无本质区别，因此不能简单否定LLM的知识有效性。

OpenAI与美国国防部达成协议，允许其AI系统在机密环境中部署，设定了安全红线。

OpenAI的协议比Anthropic的协议更具保障性，因其部署方式更安全。

OpenAI与国防部的合作模式反映出两者在价值观与商业策略上的根本差异。

Ghostty是一款快速、功能丰富的终端模拟器，支持多平台使用。

Ghostty的核心库libghostty正在快速发展，已支持多个终端项目。

Ghostty的GUI应用持续迭代，预计将发布1.3版本，新增关键功能。

AI让写代码变得更容易，但工程师的工作却变得更加复杂和疲惫。

决策树是一种监督学习算法，通过嵌套决策规则对数据进行分层划分。

决策树的性能高度依赖特征工程，缺乏高质量特征处理会影响表现。