本研究提出了一种新方法,通过在小数据集上搜索量化策略并推广到大规模数据集,解决了混合精度量化方法的计算开销问题。实验结果表明,该方法在CIFAR10数据集上达到了与ImageNet相当的准确度,同时显著降低了计算成本,效率提高了150%。
本文介绍了如何使用CIFAR-10数据集,CIFAR10()函数的参数包括数据路径、训练/测试选择和数据转换等。训练数据包含50000张图像,测试数据包含10000张。用户可以选择下载并提取数据集或手动下载,示例代码展示了如何加载和显示数据。
本文提出了一种改进的异步随机梯度下降(SGD)算法,通过调整学习速率来提高稳定性和收敛速度。实验结果表明,该算法在CIFAR10和ImageNet数据集上表现优越,尤其在异构环境中具有良好的收敛速度和通信效率。
本文介绍了使用PyTorch的自动混合精度(AMP)训练接口在半精度下训练神经网络的方法。通过AMP,可以自动处理数据类型转换和缩放,最小化精度和模型质量损失。在CIFAR10数据集上训练ResNet50模型时,使用AMP可以加快训练速度,且没有准确性损失。
本文提出了一种改进的随机梯度下降(SGD)算法,通过引入基于1/√t的衰减步长,显著提高了在FashionMNIST和CIFAR10数据集上的图像分类准确率,分别提高了0.5%和1.4%。
该文章提出了对手感知部分标签学习方法,通过引入对手标签提高预测标签可靠性。作者还提出了ATM算法实现分类器和风险函数一致性。实验结果显示该方法在CIFAR10、CIFAR100和CUB200数据集上鲁棒性高。
该研究提出了一种基于l2范数的新方法,用于检测ODD攻击技巧。该方法在CIFAR10/100平均OOD检测度量方面相对于之前的方法有约13%/5%的提高,并在分布内样本上提供高水平的认证和敌对鲁棒性。
通过DFL算法解决了去中心化联邦学习中的局部一致性和局部异构过拟合问题,并在MNIST、CIFAR10和CIFAR100数据集上验证了算法的优越性能。
完成下面两步后,将自动完成登录并继续当前操作。