为什么train_batch_size是小于ppo_mini_batch_size的？ #23
Description
在main_grpo.sh脚本中 data.train_batch_size=$ROLLOUT_N_QUERY = 16
但是actor_rollout_ref.actor.ppo_mini_batch_size=$GLOBAL_BATCH_SIZE=256
这是笔误吗
{{ message }}
在main_grpo.sh脚本中 data.train_batch_size=$ROLLOUT_N_QUERY = 16
但是actor_rollout_ref.actor.ppo_mini_batch_size=$GLOBAL_BATCH_SIZE=256
这是笔误吗