小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
沉浸式翻译 immersive translate
Dify.AI
openSUSE 发布更新后的法律分类模型

openSUSE 在 HuggingFace 平台推出了新版本语言模型 Cavil-Qwen3.5-4B,专为开源软件法律合规检查设计。该模型基于阿里巴巴 Qwen3.5-4B,支持低秩适配(LoRA)微调,适合普通硬件运行。新版本提供 GGUF 格式,降低内存占用,便于本地使用,强调开源透明性,促进社区合作与发展。

openSUSE 发布更新后的法律分类模型

openSUSE 中文社区 openSUSE 中文社区 · 2026-03-17T02:00:00Z

HSplitLoRA框架通过结合分割学习和低秩适配技术,解决了大语言模型在异构计算资源下微调的高成本和资源不平衡问题。该框架动态配置LoRA适配器的分解秩,优化模型分割点,显著提升微调效率和准确性。实验结果表明,其在训练精度和收敛速度上优于现有基准。

HSplitLoRA: A Heterogeneous Split Parameter-Efficient Fine-Tuning Framework for Large Language Models

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2025-05-05T00:00:00Z

本研究提出了一种新方法“路由混合模型(MoR)”,通过整合专家混合理念,优化低秩适配(LoRA)在大型模型微调中的性能,平均提升1%。

路由混合模型

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2025-03-30T00:00:00Z

本研究提出了BrainWavLM模型,通过低秩适配微调WavLM编码模型,提升了对语言刺激反应的预测能力,增强了语音刺激的语义表示,展现出更高的编码性能和稳定性。

BrainWavLM: Fine-tuning Speech Representations Using Brain Responses to Language

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2025-02-13T00:00:00Z

本文提出了一种新方法,通过量化低秩适配(QLoRA)对4GB显存系统进行阿拉伯语言处理的Qwen2-1.5B模型微调,解决了阿拉伯自然语言处理中的形态复杂性和方言变异问题。实验结果表明,该模型在文本分类、问答和方言识别等任务上性能显著提升,最终损失收敛至0.1083,为低资源语言适配和大规模语言模型的高效微调提供了重要贡献。

Resource-Aware Arabic Large Language Model Creation: Model Adaptation, Integration, and Multi-Domain Testing

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-12-23T00:00:00Z

本研究通过低秩适配(LoRA)技术改进鸟瞰图(BEV)表示,增强了其在环境变化和故障下的鲁棒性。实验结果表明,该方法在参数更少、训练更快的情况下,显著提升了BEV感知效果。

Robust Bird's Eye View Segmentation by Adapting DINOv2

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-09-16T00:00:00Z

本研究提出了GaLore和LQ-LoRA等高效微调和量化方法,旨在降低大型语言模型的内存使用,同时保持性能。通过低秩适配和量化技术,优化了模型训练过程,展示了在消费级GPU上进行大规模模型预训练的可行性。这些方法在不同任务中表现优异,有效应对了计算和存储需求增加的挑战。

Q-GaLore: 基于 INT4 投影和层自适应低秩梯度的量化 GaLore

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-07-11T00:00:00Z

本文综述大语言模型在多语言机器翻译中的优势与挑战,评估XGLM、OPT、BLOOMZ、ChatGPT等模型在102种语言上的性能,并探讨上下文学习、低秩适配微调、文档级翻译及语义歧义消解等改进方法。研究还发现,通用大模型在法律领域表现不及专用小模型,凸显领域专业知识的重要性。

大型语言模型 “ad referendum”: 在法律领域的机器翻译水平如何?

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-02-12T00:00:00Z

本文综述大语言模型在机器翻译领域的多项进展:提出ALMA微调方法并在WMT测试集上显著提升性能;采用对比式后训练(SLiC、DPO)进行人类偏好对齐,改善Orca等模型表现;探索上下文学习以实现实时自适应翻译;用混合策略解决同传训练与推理不匹配问题;系统评估多语言翻译能力;研究文档级翻译适配;利用GPT-4等模型进行跨语言数据增强;提出XConST提升零样本翻译;用偏好损失框架开展翻译教学;结合低秩适配器改进翻译与自动后编辑。

对比型偏好优化:推动机器翻译中 LLM 性能的边界

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-01-16T00:00:00Z

本文综述大语言模型在文档级机器翻译中的适应与性能,涵盖提示策略、精细调优、低秩适配、同传翻译及多语种迁移等研究。部分专用模型性能可超GPT-4,文档级上下文建模与整体翻译优于逐句翻译,但仍存在关键错误与偏离翻译问题。

通过混合指令提升大型语言模型的文档级翻译

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-01-16T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码