贾扬清认为大模型尺寸的发展正在重走CNN的老路,但他主张行业应该发展小型垂直模型。他列举了CNN的发展历程,认为模型必须先变大,然后才能变小。有人认同这个趋势,认为小·大模型能重新定义AI的智能,但也有人持不同意见,认为大模型尺寸仍在增长。
贾扬清的论文“DeCAF: A Deep Convolutional Activation Feature for Generic Visual Recognition”获得ICML 2024时间检验奖。该论文提出了深度卷积激活特征DeCAF,用于解决通用视觉识别问题。通过实验,DeCAF在多个任务上表现出色,包括对象识别、域适应、细粒度识别和场景识别。论文还分析了网络各层的计算时间分布,并开源了DeCAF特征提取工具和预训练模型。ICML 2024还公布了最佳论文奖,其中包括Stable Diffusion 3论文和“Discrete Diffusion Modeling by Estimating the Ratios of the Data Distribution”论文。
完成下面两步后,将自动完成登录并继续当前操作。