小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
神经网络详解:它们是什么以及如何用Python构建一个

神经网络通过输入、权重、偏置和激活函数进行预测,并利用损失函数、反向传播和梯度下降优化参数。本文用Python和NumPy从零构建XOR神经网络,详解前向传播、损失计算、反向传播和参数更新,并与PyTorch实现对比,强调理解基础原理的重要性。

神经网络详解:它们是什么以及如何用Python构建一个

freeCodeCamp.org freeCodeCamp.org · 2026-08-21T21:52:56Z
不用出声也能聊天?苹果公开一项无声语音识别专利

苹果申请了一项默声语音检测专利,通过光学传感器捕捉面部肌肉微动,经神经网络解码为文字并合成语音,延迟低于100毫秒。系统支持耳机或眼镜集成,可离线或分布式运行,并强调低延迟音频反馈以确认识别结果。该技术路线已有先例,核心创新在于本地反馈和硬件架构。

不用出声也能聊天?苹果公开一项无声语音识别专利

实时互动网 实时互动网 · 2026-08-14T06:39:17Z
PyTorch深度学习教程

本文介绍PyTorch深度学习框架,涵盖其特性、张量操作、环境搭建及构建MNIST手写数字识别模型的全流程。教程指导使用PyCharm配置环境、定义神经网络、训练并评估模型,最终达到96.87%测试准确率,并提及GPU加速、分布式训练等进阶技术。

PyTorch深度学习教程

The JetBrains Blog The JetBrains Blog · 2026-07-29T16:18:55Z
LALAL.AI推出Lynx:用于语音去噪的神经网络

LALAL.AI推出专为语音降噪设计的神经网络Lynx,能分离人声与背景噪音,生成干净人声轨道,节省后期制作时间。模型比旗舰版小六倍,基于人工整理数据训练。Lynx已上线,成为平台使用量第二大的分离音轨,预计2025年处理超1150万音频分割,未来将改进合唱分离和远距离语音隔离。

LALAL.AI推出Lynx:用于语音去噪的神经网络

实时互动网 实时互动网 · 2026-07-24T06:47:59Z
仙剑 DOS 版:移植到 Rust,再用神经网络实时超分

该文介绍将仙剑奇侠传DOS版从C语言移植到Rust,并集成FP16神经网络超分技术,提升至1280×720分辨率。开发耗时三天,涵盖移植、超分和kernel调优。浏览器与原生版本共用权重,性能优化后达60fps,验证确保精度。作者建议游戏厂商采用此方法低成本重制经典作品。

仙剑 DOS 版:移植到 Rust,再用神经网络实时超分

Lv. MAX Lv. MAX · 2026-07-19T00:00:00Z
卷积神经网络、递归神经网络与变换器解析:深度学习关键概念的思维模型

深度学习是机器学习的一个子集,利用多层神经网络模拟人脑结构。主要类型包括卷积神经网络(CNN)、递归神经网络(RNN)和变换器(Transformers)。Keras是一个用户友好的深度学习API,简化模型构建和训练过程。

卷积神经网络、递归神经网络与变换器解析:深度学习关键概念的思维模型

freeCodeCamp.org freeCodeCamp.org · 2026-07-14T00:18:43Z
向量即一切:拆解ChatGPT底层的乘法加法与空间折叠

文章探讨了AI基础设施中的向量、神经网络和深度学习的核心概念。向量将词语转化为数字以计算相似度,点积运算用于衡量向量对齐程度。神经网络通过多层结构重塑输入,激活函数影响学习效果,损失函数定义错误,训练通过梯度下降优化模型参数。文章指出当前模型在处理上下文时的局限性,强调Transformer架构的重要性。

向量即一切:拆解ChatGPT底层的乘法加法与空间折叠

极道 极道 · 2026-07-10T04:28:00Z
神经网络真的正在收敛为同一个世界模型吗

研究表明,人工智能模型并未收敛于同一世界模型,而是形成了相似的邻里关系。通过校准相似度指标,发现许多增长只是统计幻觉。新的“亚里士多德表征假说”强调模型间的关系结构,未来研究应关注邻居关系的对齐。

神经网络真的正在收敛为同一个世界模型吗

极道 极道 · 2026-06-21T03:02:00Z
模运算挑战

特伦斯·陶与达梅克·戴维斯在SAIR基金会发起了数学挑战,旨在简化解决2200万代数问题的能力。第一阶段已完成,生成了有效的“备忘单”。第二阶段正在进行,参赛者需使用Python代码生成Lean证明。新挑战聚焦于神经网络执行简单的模乘运算,探索其在处理大输入时的可扩展性。

模运算挑战

What's new by TerryTao What's new by TerryTao · 2026-06-08T19:51:47Z

神经网络通过前向传播、损失计算、反向传播和梯度下降进行训练。每个神经元执行线性打分和非线性激活,多个神经元组成层,层与层之间的非线性使网络能够拟合复杂函数。递归神经网络(RNN)通过引入状态,克服了多层感知器(MLP)在序列任务中的局限性。训练过程是参数在损失曲面上逐步优化的过程。

【Transformer 与注意力机制】08.5 神经网络基础:从 MLP 到 RNN 的最后一块地基

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-05-10T00:00:00Z
Cell研究:加速TMS抗抑郁的真正核心是前额叶到岛叶回路

最新研究发现,快速抗抑郁的关键在于前额叶与岛叶的连接。经颅磁刺激(TMS)通过激活这一回路,显著提升情绪网络功能。研究表明,刺激前额叶后岛叶被激活,若切断连接则抗抑郁效果消失。这一发现可能改变抑郁症的治疗方法,未来将更注重神经网络的精准调控。

Cell研究:加速TMS抗抑郁的真正核心是前额叶到岛叶回路

极道 极道 · 2026-05-08T13:03:00Z
ParaRNN:大规模非线性递归神经网络,可并行训练

苹果研究人员提出了ParaRNN框架,显著提高了非线性递归神经网络(RNN)的训练效率,实现了大规模并行训练。该方法使得7亿参数的RNN在语言建模任务中表现出与变换器相当的性能,且通过引入牛顿法,ParaRNN在保持非线性表达能力的同时实现了高效的并行计算。这一进展为RNN的广泛应用和进一步研究提供了新的可能性。

ParaRNN:大规模非线性递归神经网络,可并行训练

Apple Machine Learning Research Apple Machine Learning Research · 2026-04-23T00:00:00Z

最近发布了用Rust编写的轻量级自动微分库ferris-grad。该库具有PyTorch风格的自动求导引擎,核心代码不到1000行,且无外部依赖。实现包括标量计算图、张量操作和神经网络层,支持训练多层感知机和mini GPT。项目灵感来源于Karpathy的micrograd和microgpt,欢迎参与贡献。

1000行Rust实现一个类似pytorch的轻量级自动微分库

Rust.cc Rust.cc · 2026-04-19T14:10:58Z

激活函数在神经网络中引入非线性,使网络能够拟合复杂关系。最早的Sigmoid函数因其可导性被广泛使用,但存在梯度消失问题。Tanh函数有所改进,但仍未解决深层网络训练困难。ReLU函数的出现解决了梯度消失问题,但引入了Dying ReLU现象。后续的激活函数如Leaky ReLU、ELU、GELU和SwiGLU等不断优化,以适应不同任务需求。激活函数的选择直接影响网络的训练效果和性能。

【Transformer 与注意力机制】05. 激活函数:让网络「弯下来」的非线性魔法

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-04-15T00:00:00Z

神经网络本质上是一个函数,通过输入输出结果来工作。训练过程是调整参数以使输出接近预期。深度学习利用多层结构和非线性激活函数来拟合复杂关系,能够有效处理高维数据。理解神经网络的关键在于明确输入、输出和参数的关系。

【Transformer 与注意力机制】04. 函数与神经网络:从 y=f(x) 到一台可学习的拟合机器

土法炼钢兴趣小组的博客 土法炼钢兴趣小组的博客 · 2026-04-15T00:00:00Z
DDPM笔记

DDPM(去噪扩散概率模型)通过逐步添加噪声生成图像,利用神经网络预测并去除噪声。模型依赖高斯分布,损失函数使用均方误差(MSE)衡量真实噪声与预测噪声的差异。训练过程中,模型优化以提升生成图像质量,最终通过积分将预测的高斯分布转化为清晰图像。

DDPM笔记

plus studio plus studio · 2026-04-11T00:00:00Z
从递归神经网络到变换器

自然语言处理经历了巨大的演变,传统的序列到序列模型依赖递归神经网络(RNN),但在处理长序列时存在信息瓶颈。为了解决这一问题,引入了注意力机制,使解码器能够动态关注输入序列的不同部分。现代的Transformer模型通过堆叠注意力层,能够高效处理复杂的序列数据,广泛应用于文本生成和图像处理等领域。

从递归神经网络到变换器

Louis Aeilot's Blog Louis Aeilot's Blog · 2026-04-07T22:30:09Z

递归神经网络(RNN)用于处理序列数据,具备内部状态(记忆),适应多种输入输出结构。RNN通过递归公式更新隐藏状态并生成输出。长短期记忆(LSTM)通过门控机制解决梯度消失问题,增强信息流动。

CS231n 讲义 VII:递归神经网络

Louis Aeilot's Blog Louis Aeilot's Blog · 2026-04-07T13:30:09Z
【TVM教程】理解 Relax 抽象层

Apache TVM 更新至 0.21.0 版本,中文文档已同步。TVM 是一个深度学习编译框架,支持多种硬件。Relax 是其图抽象方式,用于优化机器学习模型。文章介绍了如何使用 Relax 表达神经网络模型的结构与数据流,并提供了高层与底层实现的代码示例,强调数据流块和无副作用函数的重要性,以便于编译器优化。

【TVM教程】理解 Relax 抽象层

HyperAI超神经 HyperAI超神经 · 2026-04-07T02:46:11Z

本文讨论了卷积神经网络(CNN)的架构和训练方法,包括归一化层、正则化(如Dropout)、激活函数(如ReLU和GELU)、残差网络(ResNet)和权重初始化(Kaiming初始化)。还介绍了数据预处理、数据增强、迁移学习策略及超参数优化步骤,强调系统调试的重要性,指出大多数失败源于基本设置问题,而非超参数选择。

CS231n 讲义 VI:卷积神经网络架构与训练

Louis Aeilot's Blog Louis Aeilot's Blog · 2026-04-03T14:45:09Z
  • <<
  • <
  • 1 (current)
  • 2
  • 3
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 1tok 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator 模力方舟 Gitee AI

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码