Update faq_2021_s1.md (#556)

* Update faq_2021_s1.md

* Update faq_2021_s1.md

* Update faq_2021_s1.md

* Update faq_2021_s1.md

* Update faq_2021_s1.md
This commit is contained in:
cuicheng01 2021-01-14 11:21:35 +08:00 committed by GitHub
parent 6f2b76dbd0
commit 2e6b774ac9
No known key found for this signature in database
GPG Key ID: 4AEE18F83AFDEB23

View File

@ -3,6 +3,7 @@
## 目录
* [第1期](#第1期)(2021.01.05)
* [第2期](#第2期)(2021.01.14)
<a name="第1期"></a>
## 第1期
@ -47,3 +48,26 @@
4. 可以将图像预处理的逻辑(主要设计resize、crop、normalize等)放在GPU上运行这可以进一步加速预测过程。
更多的预测部署加速技巧,也欢迎大家补充。
<a name="第2期"></a>
## 第2期
### Q2.1: PaddleClas在设置标签的时候必须从0开始吗class_num必须等于数据集的类别数吗
**A**在PaddleClas中标签默认是从0开始所以尽量从0开始设置标签当然从其他值开始设置也可以这样会导致设置的class_num增大进而导致分类的FC层参数量较大权重文件会占用更多的存储空间。在数据集类别连续的情况下设置的class_num要等于数据集类别数当然大于数据集类别数也可以在很多数据集上甚至可以获得更高的精度但同样会使FC层参数量较大在数据集类别数不连续的情况下设置的class_num要等于数据集中最大的class_id+1。
### Q2.2: 当类别数特别多的时候最后的FC特别大导致权重文件占用较大的存储空间该怎么解决
**A**最终的FC的权重是一个大的矩阵大小为C*class_num其中C为FC前一层的神经单元个数如ResNet50中的C为2048可以通过降低C的值来进一步减小FC权重的大小比如可以在GAP之后加一层维数较小的FC层这样可以大大缩小最终分类层的权重大小。
### Q2.3: 为什么使用PaddleClas在自定义的数据集上训练ssld蒸馏没有达到预期
首先需要确保Teacher模型的精度是否存在问题其次需要确保Student模型是否成功加载了ImageNet-1k的预训练权重以及Teacher模型是否成功加载了训练自定义数据集的权重最后要确保初次学习率不应太大至少保证初始学习率不要超过训练ImageNet-1k的值。
### Q2.4: 移动端或嵌入式端上哪些网络具有优势?
建议使用移动端系列的网络,网络详情可以参考[移动端系列网络结构介绍](../models/Mobile.md)。如果任务的速度更重要可以考虑MobileNetV3系列如果模型大小更重要可以根据移动端系列网络结构介绍中的StorageSize-Accuracy来确定具体的结构。
### Q2.5: 既然移动端网络非常快为什么还要使用诸如ResNet这样参数量和计算量较大的网络
不同的网络结构在不同的设备上运行速度优势不同。在移动端上的cpu上移动端系列的网络比服务器端的网络运行速度更快但是在服务器端侧相同精度下ResNet等经过特定优化后的网络具有更大的优势所以需要根据具体情况来选择具体的网络结构。