En spennende artikkel fra Apple. MoE-er er sterkere enn du tror: Hyper-parallell slutningsskalering med RoE Papir: