小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
沉浸式翻译 immersive translate
Dify.AI

Scikit-LLM 是一个 Python 库,将预训练大语言模型封装为 scikit-learn 风格的 fit() 和 predict() 接口,无需重新训练模型。文章以 IT 支持工单分类为例,演示少样本分类:仅需 3 至 5 个带标签示例即可引导模型准确分类新文本,效果优于零样本分类,尤其适合领域特定任务。

使用 Scikit-LLM 进行少样本文本分类

KDnuggets KDnuggets · 2026-10-14T14:00:00Z
使用LLM嵌入和Scikit-learn构建RAG流水线

本文介绍用scikit-learn和开源模型搭建轻量级RAG流水线,无需付费API或重型框架。流程为:下载文档数据集并分块,用sentence-transformers生成嵌入,用NearestNeighbors以余弦距离构建检索器,再接入Qwen2.5-0.5B-Instruct生成答案,适合原型验证和低成本部署。

使用LLM嵌入和Scikit-learn构建RAG流水线

MachineLearningMastery.com MachineLearningMastery.com · 2026-10-13T11:00:00Z

Scikit-LLM 将大语言模型封装为 scikit-learn 估计器,提供 fit 与 predict/transform 接口,可无缝接入 Pipeline 和交叉验证。常用 ZeroShotGPTClassifier 以标签作为任务说明;DynamicFewShotGPTClassifier 按样本检索最接近的示例。GPTVectorizer 可将文本转为固定向量,GPTTranslator 支持跨语言分类。需注意 API 调用带来的 token 成本会随交叉验证和网格搜索成倍增加。

Scikit-LLM 中的估计器:KDnuggets 速查表

KDnuggets KDnuggets · 2026-09-16T13:58:19Z

早期scikit-learn常见错误是预处理在交叉验证前泄露验证集数据。将特征工程纳入Pipeline,各步骤仅用训练数据拟合,可避免泄露。常用组件有ColumnTransformer、make_column_selector、SimpleImputer、OneHotEncoder和TargetEncoder;set_output与get_feature_names_out便于查看结果,GridSearchCV可一并调优预处理参数。

Scikit-Learn中的特征工程:KDnuggets速查表

KDnuggets KDnuggets · 2026-09-10T16:14:33Z
什么是机器学习模型以及如何构建一个

本文介绍机器学习基础概念,通过Python和scikit-learn构建决策树模型,预测学生是否通过考试。文章涵盖数据集、特征、标签、训练与测试数据划分、模型训练与评估等核心步骤,并解释过拟合、欠拟合、分类与回归的区别,强调理解基本工作流程比记忆算法更重要。

什么是机器学习模型以及如何构建一个

freeCodeCamp.org freeCodeCamp.org · 2026-09-09T19:46:10Z
在统一的Scikit-learn管道中结合LLM嵌入与表格特征

本文介绍如何构建统一的scikit-learn管道,结合轻量级开源语言模型生成的文本嵌入与表格特征进行分类。通过自定义Transformer封装Hugging Face的sentence-transformers,利用ColumnTransformer并行处理文本、数值和分类特征,最终用随机森林分类器评估。以垃圾短信检测为例,混合真实文本与合成表格数据,实现高精度分类,提供可复用的部署方案。

在统一的Scikit-learn管道中结合LLM嵌入与表格特征

MachineLearningMastery.com MachineLearningMastery.com · 2026-08-31T12:00:18Z
Baby Anti-Spam 自建反垃圾评论系统

文章讨论了作者在使用Akismet反垃圾评论插件时遇到的授权问题,最终决定自建基于scikit-learn的垃圾评论检测系统。该系统利用开源数据和自有评论数据进行训练,适合小型WordPress站点,作者分享了项目的配置和使用方法。

Baby Anti-Spam 自建反垃圾评论系统

obaby@mars obaby@mars · 2026-04-06T10:05:11Z
如何在一个Scikit-learn管道中结合LLM嵌入、TF-IDF和元数据

本文介绍了如何在scikit-learn管道中结合LLM嵌入、TF-IDF特征和结构化元数据进行文本分类。主要步骤包括加载数据集、构建特征管道、融合特征以及训练分类器,以实现高效的文本分类模型。

如何在一个Scikit-learn管道中结合LLM嵌入、TF-IDF和元数据

MachineLearningMastery.com MachineLearningMastery.com · 2026-02-25T11:00:05Z
使用Dask和Scikit-learn处理大数据集

本文介绍了如何在有限硬件条件下使用Dask进行可扩展的数据处理。Dask与Python框架无缝集成,适合处理大数据集。通过示例,展示了数据的加载、清理和准备过程,并结合scikit-learn进行机器学习建模,以优化内存使用和加速处理流程。

使用Dask和Scikit-learn处理大数据集

KDnuggets KDnuggets · 2025-11-13T15:00:29Z
GPU加速机器学习工作流程的cuML实用入门

本文介绍了cuML,一个用于GPU加速机器学习的开源库,提供与scikit-learn相似的API,支持多种算法如回归和分类,显著提高训练速度。通过对成人收入数据集的比较,cuML在分类准确率和训练时间上均优于传统的scikit-learn。

GPU加速机器学习工作流程的cuML实用入门

MachineLearningMastery.com MachineLearningMastery.com · 2025-09-18T12:03:53Z
如何无缝结合Pandas、NumPy和scikit-learn

本文介绍了如何将Pandas、NumPy和scikit-learn结合,构建机器学习工作流。通过混凝土抗压强度数据集,展示了数据加载、处理、建模和评估的过程。Pandas用于数据处理,NumPy进行数值计算,scikit-learn用于模型构建和评估。整合这三者可以提高机器学习的效率和准确性,特别是通过特征工程提升模型性能。

如何无缝结合Pandas、NumPy和scikit-learn

MachineLearningMastery.com MachineLearningMastery.com · 2025-05-12T17:20:26Z
第三天评估

创建文件夹结构并从Kaggle下载Iris数据集。编写Dockerfile以构建使用Python 3.9及其依赖项的Docker镜像,安装pandas、matplotlib和scikit-learn。使用COPY和CMD命令启动容器,最后通过'docker build -t username/filename:latest .'构建镜像。

第三天评估

DEV Community DEV Community · 2025-04-28T18:13:15Z
如何开始使用Scikit-Learn:Python中适合初学者的机器学习指南

Scikit-Learn是Python的主要机器学习库,提供分类、回归和聚类等工具,适合初学者和开发者。它开源、易用,支持数据预处理和模型选择,广泛应用于各行业。

如何开始使用Scikit-Learn:Python中适合初学者的机器学习指南

DEV Community DEV Community · 2025-04-24T12:53:33Z
🤖 解密人工智能与机器学习:开发者的视角

人工智能(AI)和机器学习(ML)正在革新软件开发与决策。AI是机器智能的广泛概念,ML是其子集,通过数据进行学习。Python是主要编程语言,常用库有scikit-learn和TensorFlow。开发者可通过小项目和Kaggle竞赛入门,AI/ML已向大众开放,任何人均可参与。

🤖 解密人工智能与机器学习:开发者的视角

DEV Community DEV Community · 2025-04-12T10:01:56Z

本文介绍如何将 scikit-learn 训练的鸢尾花分类模型转换为 ONNX 格式,并利用 onnxruntime 开发交互式推理应用,最后使用 Nuitka 将应用打包成独立的 EXE 文件,实现跨平台部署。

如何將 ONNX 模型打包成獨立 EXE

1010Code 1010Code · 2025-04-06T16:00:00Z

本研究比较了GPU加速库(cuML)与传统CPU实现(scikit-learn)在物联网车辆入侵检测中的性能。结果表明,GPU加速显著提升了计算效率,训练时间缩短至最多159倍,预测速度提高至最多95倍,同时保持了检测准确性。

加速车联网入侵检测:GPU加速与基于CPU的机器学习库的基准比较

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2025-04-02T00:00:00Z
Python中的机器学习:Scikit-Learn初学者指南

机器学习是现代技术的基础,Python因其简洁和丰富的库而成为首选语言。Scikit-Learn是一个强大且易用的Python库,适合构建机器学习模型。本文介绍了Scikit-Learn的基本概念、环境设置、数据处理、模型构建与评估,旨在帮助初学者快速入门。

Python中的机器学习:Scikit-Learn初学者指南

DEV Community DEV Community · 2025-03-20T06:42:53Z
六个不太为人知的Scikit-Learn特性,能够有效节省时间

本文介绍了六个不太为人知的Scikit-Learn特性,能够有效节省时间。包括验证曲线(评估模型在不同超参数下的表现)、模型校准(确保预测概率的可靠性)、置换重要性(评估特征对模型性能的贡献)、特征哈希(减少高维特征的内存占用)、鲁棒缩放(处理异常值影响)和特征联合(同时应用多个特征转换)。

六个不太为人知的Scikit-Learn特性,能够有效节省时间

MachineLearningMastery.com MachineLearningMastery.com · 2025-03-19T11:00:22Z

本文介绍了10个Python一行代码示例,帮助用户在Scikit-Learn中高效处理机器学习任务,包括导入模块、加载数据集、数据分割、特征标准化、降维、训练SVM分类器、生成混淆矩阵、交叉验证、打印分类报告及创建数据处理和模型管道。这些代码片段旨在简化实验和提高代码清晰度。

10个用于Scikit-learn的Python一行代码

KDnuggets KDnuggets · 2025-03-05T15:00:04Z
明天会下雨吗?

本文介绍了如何使用Python的Scikit-Learn库训练KNN(K-最近邻)算法进行天气预测,利用澳大利亚气象数据集分类明天是否会下雨。强调了数据预处理的重要性,包括缺失值处理和特征标准化,并评估了模型的准确性、精确度和召回率,指出结果的实际意义。

明天会下雨吗?

DEV Community DEV Community · 2025-02-28T12:19:38Z
  • <<
  • <
  • 1 (current)
  • 2
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码