本研究论文探讨了隐私保护协作训练中使用小型深度学习模型的新方法，以及FL应用中使用transformer模型的必要性。还提出了一种专注于FL应用中计算和通信效率的新的分类法，并讨论了当前广泛使用的FL框架的现状和未来研究潜力。