forked from huawei/mindspore2022
!30484 docs_moe
Merge pull request !30484 from wangshengnan123/code_docs_moe
This commit is contained in:
commit
76c43e0bf8
|
|
@ -7,4 +7,4 @@
|
|||
- **expert_num** (int) - 表示使用的专家数量。默认值:1。
|
||||
- **capacity_factor** (float) - 表示专家处理的容量关系,其值大于等于1.0。默认值:1.1。
|
||||
- **aux_loss_factor** (float) - 表示负载均衡损失(由路由器产生)的平衡系数。相乘的结果会加到总损失函数中。此系数的值小于1.0。默认值:0.05。
|
||||
- **num_experts_chosen** (int) - 表示每个标识选择的专家数量。默认值:1。
|
||||
- **num_experts_chosen** (int) - 表示每个标识选择的专家数量,其值小于等于专家数量。默认值:1。
|
||||
Loading…
Reference in New Issue