试题试做

共 11335 道。先按知识点进入练习,也可以从下面的最新题目直接试做。

最新试题 · 第 449 页

在知识蒸馏的损失函数中,alpha 参数用于什么?

知识蒸馏中,教师模型的输出需要经过什么处理?

在 PyTorch 中,如何实现带温度的 Softmax?

知识蒸馏与模型剪枝(Pruning)的区别是什么?

在知识蒸馏中,学生模型的准确率通常会如何?

知识蒸馏可以应用于哪些任务?

在知识蒸馏中,"暗知识"(dark knowledge)指的是什么?

知识蒸馏的提出者是谁?

在知识蒸馏中,学生模型的参数量通常如何?

知识蒸馏通常适用于哪种场景?

在 PyTorch 中,KL 散度损失应该使用哪个函数?

知识蒸馏中,为什么要对 KL 散度损失乘以 T²?

特征蒸馏(Feature Distillation)蒸馏的是什么?

自蒸馏(Self-Distillation)是指什么?

在线蒸馏(Online Distillation)的特点是什么?

离线蒸馏(Offline Distillation)的特点是什么?

知识蒸馏的主要应用场景是什么?

在知识蒸馏中,温度参数 T 通常设置为多少?

知识蒸馏的损失函数通常由哪两部分组成?

当温度参数 T = 1 时,Softmax 函数会如何?

试题试做 第449页 - 生命科学与前沿科技学习平台 | 必学必会