该文综述深度网络优化的多凸与块坐标下降方法，提出光滑多凸形式及BCD训练算法，具全局与R-线性收敛，实验优于Caffe各SGD变体；并涵盖两三分结构BCD、DC外推算法、近似BCD统一框架、prox-linear算法及深度线性网络线性收敛等结果。