小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

本文探讨了优化spaCy以提高自然语言处理效率的三种技巧:选择性加载和禁用组件以减少计算开销,使用nlp.pipe进行高吞吐量批处理以利用多核并行处理,以及通过EntityRuler实现混合命名实体识别。这些方法显著提升了处理速度和准确性,满足特定业务需求。

提高文本处理和实体识别效率的三种SpaCy技巧

KDnuggets
KDnuggets · 2026-06-05T12:00:45Z
Google DeepMind 发布 Gemma 4 12B:一款无需编码器的多模态模型,支持原生音频

Google DeepMind 发布了 Gemma 4 12B,这是一个无编码器的多模态模型,支持文本、图像、音频和视频处理。该模型在消费级笔记本电脑上运行,性能接近 26B MoE 模型,但内存占用不到一半。它通过直接输入视觉和音频数据,简化了处理流程,提升了整体质量和指令遵循性。

Google DeepMind 发布 Gemma 4 12B:一款无需编码器的多模态模型,支持原生音频

实时互动网
实时互动网 · 2026-06-04T02:31:21Z

本文探讨了字符串处理的复杂性,特别是UTF-8编码及其验证算法。UTF-8由Ken Thompson和Rob Pike设计,兼容ASCII并具备自同步性。文章还介绍了Unicode的规范化、字素簇、排序算法及双向排版等概念,强调在处理文本时需考虑字符的多样性和复杂性,建议使用ICU库进行规范化和验证,以确保安全性和正确性。

Unicode 算法:UTF-8 的精妙与文本处理陷阱

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-05-27T00:00:00Z
Agent Framework 中的 Workflow Composition

本文介绍了工作流组合的概念,阐述了如何将工作流封装为可复用的执行器。通过示例,展示了定义文本处理工作流并将其封装的方法,以便在主工作流中使用。使用 BindAsExecutor() 方法,可以将完整工作流转化为标准执行器,从而简化主流程结构,提高复用性和可维护性。

Agent Framework 中的 Workflow Composition

dotNET跨平台
dotNET跨平台 · 2026-05-16T00:00:59Z
微软最新的Phi-4推理模型认为,规模并非一切

微软的Phi-4推理模型探索小型模型在低计算成本下与大型AI模型的竞争能力。该模型结合文本和图像处理,注重高质量数据和高效训练,旨在提升推理能力,而非单纯追求模型规模。

微软最新的Phi-4推理模型认为,规模并非一切

The New Stack
The New Stack · 2026-03-10T19:51:50Z
Python高阶:“咬文嚼字” - 正则表达式

Python正则表达式是强大的文本处理工具,通过re模块实现字符串匹配与查找。本文介绍了正则表达式的基本用法、常用方法及代码示例,适合个人开发者和学生学习实践。

Python高阶:“咬文嚼字” - 正则表达式

华为云官方博客
华为云官方博客 · 2026-01-09T12:30:00Z
【案例共创】华为开发者空间部署Cherry Studio实现文本数据处理与分析

本案例介绍了如何在华为开发者空间利用Cherry Studio和DeepSeek模型进行文本数据处理,将非结构化文本高效转化为结构化数据,提升数据管理效率,适合企业和个人开发者。

【案例共创】华为开发者空间部署Cherry Studio实现文本数据处理与分析

华为云官方博客
华为云官方博客 · 2025-12-23T14:00:00Z

T5Gemma 2是基于Gemma 3的多模态长上下文编码器-解码器模型,采用绑定词嵌入和合并注意力机制,显著减少参数量。它支持图像与文本处理,具备更大的上下文窗口和多语言能力,适合快速实验和应用。

T5Gemma 2:下一代编码器-解码器模型

The Keyword
The Keyword · 2025-12-18T18:30:00Z
变换器的思维方式:驱动语言模型运作的信息流

大型语言模型(LLMs)利用变换器架构将文本转化为数字表示。文本首先被分割为标记,随后每个标记转化为向量并注入位置信息。模型通过多头注意力机制和前馈神经网络逐步学习文本关系,最终预测下一个单词,从而生成连贯的输出。

变换器的思维方式:驱动语言模型运作的信息流

KDnuggets
KDnuggets · 2025-12-15T15:00:43Z
使用 Span 优化文本处理

本文介绍了通过使用Span优化字符串处理性能的案例。原始代码在字符循环中频繁创建新字符串,导致性能瓶颈。优化后,使用AsSpan()和Contains(char)减少了内存分配,显著提升了性能。测试结果显示新方法在内存分配和GC方面表现更佳。

使用 Span 优化文本处理

dotNET跨平台
dotNET跨平台 · 2025-11-07T23:57:26Z
DeepSeek AI发布DeepSeek-OCR:基于视觉的上下文压缩重新定义长文本处理

DeepSeek AI开发了DeepSeek-OCR,一个开源系统,通过光学2D映射压缩长文本,提升大语言模型的处理能力。该系统使用视觉编码,以低于10倍的压缩比实现97%的OCR精度,尤其在处理高分辨率输入和多语言文档时表现优异。其代码和模型权重已在GitHub上公开,鼓励研究者探索。

DeepSeek AI发布DeepSeek-OCR:基于视觉的上下文压缩重新定义长文本处理

InfoQ
InfoQ · 2025-10-22T18:35:00Z
文本数据的七种特征工程技巧

本文介绍了七种文本特征工程技巧,以帮助机器学习和深度学习模型处理文本。这些技巧包括去除停用词、词干提取、词袋模型、TF-IDF、n-grams、清洗和标记化,以及词嵌入,旨在将原始文本转化为机器可读的数值特征。

文本数据的七种特征工程技巧

MachineLearningMastery.com
MachineLearningMastery.com · 2025-10-16T15:24:51Z
深度信息检索的强大助手:高效长文本处理与推理能力再升级 | 开源日报 No.752

DeepResearch 是一个开源语言模型,专注于深度信息检索,拥有 305 亿参数,支持高效数据生成和强化学习。open-battery-information 项目提供电池维修工具,减少误判和电池浪费。Apollo-CustomApiCredentials 简化了 Reddit 和 Imgur API 的使用。Not Quite RARBG 继承了原 RARBG,提供丰富的种子资源。WindowsXPKg 用于生成和验证 Windows XP 密钥。

深度信息检索的强大助手:高效长文本处理与推理能力再升级 | 开源日报 No.752

开源服务指南
开源服务指南 · 2025-10-08T23:35:51Z
RAG 简要回顾

RAG(检索增强生成)技术在2025年广泛应用,主要包括离线文件解析、文本切片和嵌入优化。通过语义和结构切分提升文本处理效率,并在查询处理和评估中引入多维度嵌入。Graph RAG适合全局问题,而Agentic RAG更灵活,依赖于大语言模型的能力。

RAG 简要回顾

Measure Zero
Measure Zero · 2025-10-07T00:00:00Z
RAG 简要回顾

RAG(检索增强生成)技术在2025年广泛应用,主要包括离线文件解析、文本切片和嵌入优化。通过语义和结构切分提升文本处理效率,并在查询处理时生成多维嵌入。评估指标包括召回率、响应时间和用户满意度。Graph RAG解决全局和多跳问题,但构建图谱复杂,依赖于大型语言模型(LLM)能力。Agentic RAG允许多次检索,提升灵活性和可扩展性。

RAG 简要回顾

Measure Zero
Measure Zero · 2025-10-07T00:00:00Z
最新最全的好用免费api

DeepSeek-V3是一款基于AI的API,支持128K超长上下文,适合复杂对话和长文档分析。DeepSeek-R1则高效处理文本,适用于智能问答和内容创作。此外,还提供IP归属地查询、反欺诈和天气预报等功能,提升企业和用户的服务效率。

最新最全的好用免费api

APISpace
APISpace · 2025-09-15T05:43:03Z
【程序员干货】开发常用免费接口

DeepSeek-V3 是一款基于人工智能的 API,支持长文本处理和复杂对话,适用于客服和内容创作。DeepSeek-R1 提供高效的文本处理能力,支持智能问答和数据分析,并具备手机号码检测、二维码识别、天气查询等功能,助力企业构建智能应用。

【程序员干货】开发常用免费接口

APISpace
APISpace · 2025-09-11T07:13:07Z

Perl因其强大的文本处理能力和丰富的书籍支持,重返TIOBE指数前十。尽管曾被边缘化,Perl在系统管理和网络编程中仍然重要。Perl 5的复兴与Perl 6的停滞形成对比,体现了其核心价值和多功能性。

Perl在TIOBE指数中强势反弹——为何?

程序师
程序师 · 2025-09-11T02:39:19Z
一文收藏各种好用的API接口,含免费次数

文章介绍了多种身份认证和查询服务,包括实人认证、实名认证、运营商验证、银行卡验证、快递查询、天气预报和IP归属地查询。同时提到反欺诈技术及基于AI的DeepSeek-V3与R1接口,支持多种文本处理任务。

一文收藏各种好用的API接口,含免费次数

APISpace
APISpace · 2025-09-04T06:49:22Z

本文回顾了Perl语言的历史与影响,作者分享了从Bash转向Perl的经历,强调了Perl在文本处理方面的优势。尽管Perl曾是热门语言,但随着Python等新语言的崛起,其市场份额逐渐下降。文章探讨了Perl的灵活性与复杂性,以及在现代编程中的地位,表达了对Perl的怀念和未来的担忧。

程序员不再那么谦逊了——也许是因为没人再用 Perl 编程

程序师
程序师 · 2025-08-04T01:31:28Z
  • <<
  • <
  • 1 (current)
  • 2
  • 3
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码