研究人员开发了一种多模态特征融合分析框架,利用机器学习预测金属氧化物纳米颗粒在小鼠中的肺纤维化潜力,准确率达到85%。该模型整合了化学和体外数据,为纳米材料的安全监管提供了一种无动物实验的风险评估工具。
本文介绍了一种基于微调的Few-shot目标检测(FSOD)框架,解决了在极低标注情况下的新颖类别偏见表示和分类混淆问题。该框架利用语义嵌入提高检测性能,引入多模态特征融合增强视觉-语言通信,并提出语义感知最大间隔损失避免类别混淆。实验结果显示,该方法在PASCAL VOC和MS COCO数据集上性能显著提升。
AsymFormer是一种用于实时RGB-D语义分割的新型网络,通过优化计算资源分配和引入非对称骨干网络,实现了多模态特征的有效融合。通过重新定义特征选择和提取多模态自相似特征,同时不增加参数数量,以确保在机器人平台上实时执行。在NYUv2和SUNRGBD数据集上评估,AsymFormer在准确度和效率方面取得了平衡。
本文介绍了一种新型网络AsymFormer,用于实时RGB-D语义分割。通过优化计算资源分配和引入非对称骨干网络,实现多模态特征的有效融合。使用局部关注引导特征选择(LAFS)模块,选择性地融合特征。在NYUv2和SUNRGBD数据集上评估,AsymFormer在准确度和效率方面取得了平衡。
该研究提出了SkipcrossNets,一种新型融合架构,可自适应地结合激光雷达点云和相机图像,实现特征传递和多模态特征融合。在KITTI和A2D2数据集上表现出色,模型参数只需2.33 MB的内存,在68.24 FPS的速度下运行,适用于移动终端和嵌入式设备。
本文提出了一种名为AsymFormer的新型网络,用于实现实时RGB-D语义分割。该网络通过优化计算资源分配和引入非对称骨干网络,对冗余参数进行了最小化,以实现多模态特征的有效融合。在NYUv2和SUNRGBD数据集上评估该方法,AsymFormer在NYUv2上实现了52.0%的mIoU,在SUNRGBD上实现了49.1%的mIoU。在RTX3090上实现了65 FPS的推理速度,在实施混合精度量化后,达到了令人印象深刻的79 FPS的推理速度。
完成下面两步后,将自动完成登录并继续当前操作。