小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
DeepSeek、千问、智谱轮番登场,PC 厂商终于等到了它们的弹药

AMD在IFA 2026发布Personal AI战略,推出Ryzen AI Max 400、HP ZBook及Threadripper Halo Station,支持本地运行大模型。强调本地计算、隐私与个人上下文,以降低AI成本。开源模型如GLM、Qwen可本地运行,性能优于云端,推动AI从云端转向个人设备。

DeepSeek、千问、智谱轮番登场,PC 厂商终于等到了它们的弹药

爱范儿 爱范儿 · 2026-09-07T10:40:38Z
Perplexity的Computer代理现在可以本地运行——如果你买得起的话

Perplexity与Nvidia合作推出Portable Computer,将AI助手Computer带到桌面,需Nvidia RTX显卡(至少24GB VRAM)或DGX Spark。它本地运行模型,支持文件编辑、命令执行等,通过沙箱保障安全,必要时可请求云端模型建议。支持Qwen3.8-27B等模型,性能优于同类,面向Pro等订阅用户,Windows支持九月推出。

Perplexity的Computer代理现在可以本地运行——如果你买得起的话

The New Stack The New Stack · 2026-08-25T15:34:14Z
我们如何为Junie智能体优化Qwen 3.6模型

JetBrains团队优化Qwen3.6-27B模型以支持Junie本地运行,通过扩展滚动上下文复用KV缓存、调整提示词顺序、禁用推理模式提升速度,并采用4位量化及优化推理引擎的预填充和投机解码。相比Qwen3.8,3.6无需推理模式,性能更佳,适合Mac硬件。

我们如何为Junie智能体优化Qwen 3.6模型

The JetBrains Blog The JetBrains Blog · 2026-08-24T14:11:34Z
openleetcode本地跑LeetCode:测试用例全开源你敢信!

openleetcode 是一个用 Haskell 编写的开源工具,旨在本地运行 LeetCode 测试用例,将判题环境透明化。它支持 12 种语言,通过 YAML 文件存储测试数据,并利用 Docker 和 Piston 后端执行。项目强调开源测试用例,让用户无需猜测黑盒逻辑,但测试质量依赖社区维护,且不支持系统设计、SQL 等题型。其核心价值在于打破 LeetCode 的神秘感,提供可调试、可追溯的本地刷题体验。

openleetcode本地跑LeetCode:测试用例全开源你敢信!

极道 极道 · 2026-08-18T21:51:00Z

小型语言模型(SLM)虽知识量有限,但适合本地运行,可处理三类任务:保密数据文档结构化、批量分类(如邮件路由)及低延迟即时响应。关键在于将知识外置(如用模式约束输出),避免依赖模型记忆,并注意上下文窗口和推理限制。

小型语言模型到底能做什么?

KDnuggets KDnuggets · 2026-08-17T14:00:36Z
阿里巴巴新模型承诺在笔记本电脑上实现Opus 4.6级性能

阿里巴巴发布Qwen3.8-27B模型,采用Apache 2.0许可,可在MacBook Pro等本地设备运行。其性能接近Anthropic Opus 4.6,在编码和知识任务上超越旧旗舰,并具备视觉能力。尽管存在过度思考、量化质量损失等局限,但整体表现亮眼,优于Meta的Glimmer-30B。社区已提供MLX转换,4位版本约16GB,适合32GB内存Mac运行。

阿里巴巴新模型承诺在笔记本电脑上实现Opus 4.6级性能

The New Stack The New Stack · 2026-08-14T18:10:58Z
MacStudio跑KimiK3:剪枝干掉73%专家 瘦身到350GB

该文章介绍PipeNetwork的kimi-k3-mlx项目,将Moonshot AI的2.8T参数MoE模型Kimi K3转换为苹果芯片MLX格式,通过流式转换和REAP剪枝技术删除73%专家,将模型从1.6TB压缩至350GB,使Mac Studio等大内存设备能本地运行,展示了巨型模型个人化的工程路径。

MacStudio跑KimiK3:剪枝干掉73%专家 瘦身到350GB

极道 极道 · 2026-07-30T03:48:00Z

本文介绍如何在本地运行Qwythos-9B-Claude-Mythos-5-1M模型,该模型为9B参数推理编码模型,适合消费级硬件。通过llama.cpp安装并启动服务,设置100K上下文和MTP推测解码,在RTX 4070 Ti Super上达到81.74 tokens/秒。随后安装Pi及llama插件,连接本地服务器作为编码代理。测试显示模型能成功构建浏览器游戏和CSV转Excel CLI工具,表现快速准确,无需外部API,适合日常编码任务。

使用llama.cpp和Pi在本地运行Mythos增强编码模型

KDnuggets KDnuggets · 2026-07-21T14:00:42Z
神经机器翻译的工作原理:使用React Native和QVAC构建你自己的翻译应用

2017年谷歌团队发表论文《Attention Is All You Need》,提出Transformer架构,使机器翻译从逐词处理转向理解上下文,成为ChatGPT等大模型的基础。文章随后介绍QVAC平台,支持在移动设备本地运行翻译模型,无需云端,保护隐私,并展示英译法应用的完整实现代码。

神经机器翻译的工作原理:使用React Native和QVAC构建你自己的翻译应用

freeCodeCamp.org freeCodeCamp.org · 2026-07-17T16:51:58Z
在15分钟内使用Ollama运行本地AI模型

本文介绍了如何在15分钟内使用Ollama在本地运行小型语言模型。用户只需安装Ollama、下载模型(如Llama 3.2 3B)并开始聊天。Ollama通过量化技术减少内存占用,确保模型高效运行,保障数据安全和隐私。

在15分钟内使用Ollama运行本地AI模型

MachineLearningMastery.com MachineLearningMastery.com · 2026-07-16T12:25:41Z
如何使用JavaScript构建基于浏览器的PDF图像提取工具

本文介绍了如何使用JavaScript构建一个基于浏览器的PDF图像提取工具。用户可以上传PDF文件,预览页面,提取嵌入的图像,并按页面组织下载。该工具在本地运行,确保用户隐私,提取的图像保持原始质量,适用于设计、营销、教育等多个行业。

如何使用JavaScript构建基于浏览器的PDF图像提取工具

freeCodeCamp.org freeCodeCamp.org · 2026-07-13T14:12:57Z
本地模型在编码中的可行性

本文探讨了在本地运行生成模型进行编码的可行性,分析了影响模型性能的因素,如内存、处理器核心、模型参数和推理能力。尽管小型模型在工具调用上存在困难,但Qwen3.6 35B MoE模型在能力、速度和内存占用方面表现最佳。总体而言,当前模型仍需改进,尚未实现简单的“即插即用”体验。

本地模型在编码中的可行性

Martin Fowler Martin Fowler · 2026-07-07T12:34:00Z
Show Me The Story – AI 写长篇小说工具:从设定到大纲到逐章成文,一条龙走完

Show Me The Story是一款AI写小说工具,支持从设定到大纲再到逐章成文的全过程,适合网文和长篇小说作者。它提供角色和世界观管理及AI生成大纲等功能,用户可在本地运行以避免AI腔,并支持润色和章节优化。该工具在GitHub开源,建议用户先配置故事设定以提高大纲质量。

Show Me The Story – AI 写长篇小说工具:从设定到大纲到逐章成文,一条龙走完

小众软件 小众软件 · 2026-06-16T06:51:28Z
谷歌Gemma 4 12B的性能几乎与26B基准相当——并可在您的笔记本电脑上运行

谷歌推出了Gemma 4 12B模型,旨在为标准笔记本电脑提供高性能的多模态智能。该模型内存占用比Gemma 4 26B小一半,但性能接近,支持本地运行,适合开发者使用。其统一架构可直接处理音频和图像输入,减少延迟和内存使用,吸引了开发者的关注。

谷歌Gemma 4 12B的性能几乎与26B基准相当——并可在您的笔记本电脑上运行

The New Stack The New Stack · 2026-06-04T19:30:19Z
本地多模态拳王Gemma 4 12B评测 | 无编码器架构详解

谷歌最新的Gemma 4 12B是一款轻量级多模态AI模型,采用无编码器架构,能够直接处理图像和音频,提升了效率和理解能力。其120亿参数使其在普通电脑上运行成为可能,具备高效、快速的响应能力,并支持本地运行,确保隐私和安全。Gemma 4 12B适合个人用户和开发者,具有极高的可定制性。

本地多模态拳王Gemma 4 12B评测 | 无编码器架构详解

极道 极道 · 2026-06-03T23:29:00Z

Gemma 4 12B是最新的多模态智能模型,专为笔记本电脑设计,具备强大的推理能力和音频输入。它采用无编码架构,减少延迟和内存使用,支持在16GB内存的设备上本地运行。该模型已获得150百万次下载,开发者可利用其功能构建各种应用。

介绍Gemma 4 12B:一个统一的无编码多模态模型

The Keyword The Keyword · 2026-06-03T16:00:00Z
DeepSeek V4 Flash专用推理引擎ds4.c完全指南:本地跑大模型的新玩法

本文介绍了ds4.c,一个为DeepSeek V4 Flash模型设计的轻量级推理引擎。该引擎支持本地运行,具备超长上下文和高效的KV缓存,能够快速处理复杂问题。与云端API相比,本地运行更安全、无延迟且无额外费用,适合对隐私和性能有高要求的用户。尽管目前仍处于alpha版本,作者欢迎用户测试和反馈。

DeepSeek V4 Flash专用推理引擎ds4.c完全指南:本地跑大模型的新玩法

极道 极道 · 2026-05-07T22:48:00Z
69个开源AI工具大盘点2026年4月版 - 省下每年5万美金订阅费的开源方案

2026年4月,推荐了69个开源AI工具,包括Ollama、vLLM、LM Studio等,适用于本地运行大模型和推理引擎,帮助用户每年节省高达5万美元的订阅费。这些工具强调了开源的灵活性和成本效益,适合不同需求的开发者和企业。

69个开源AI工具大盘点2026年4月版 - 省下每年5万美金订阅费的开源方案

极道 极道 · 2026-04-30T06:51:00Z
用 OpenVINO 打通 ComfyUI + ERNIE-Image:Intel CPU 和 GPU 也能快速本地生图

本文介绍了如何在没有CUDA环境的情况下,通过ComfyUI和OpenVINO在Intel平台上本地运行ERNIE-Image模型。该项目简化了安装和使用流程,用户只需按照步骤准备模型、启动ComfyUI并添加节点,即可快速生成图像,适合希望快速验证工作流的开发者。

用 OpenVINO 打通 ComfyUI + ERNIE-Image:Intel CPU 和 GPU 也能快速本地生图

百度大脑 百度大脑 · 2026-04-24T11:33:52Z

Mouser 是一款轻量开源、纯本地运行的罗技鼠标驱动替代品,专为 HID++ 鼠标重映射按键和手势,MX Master 系列支持最完善。安装包约 50MB,无需账号和云端,支持 Windows、macOS、Linux,可调 DPI、Smart Shift、滚动方向,配置存本地 JSON。使用前需彻底关闭 Logitech Options+。

Mouser:轻量开源的罗技鼠标驱动替代方案

Frytea's Blog Frytea's Blog · 2026-04-20T07:18:12Z
  • <<
  • <
  • 1 (current)
  • 2
  • 3
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码