TY - RPRT TI - Model Casting and Low-Parameter Gating: Towards More Sparsely Activated FFNs AU - Maria Lomeli AU - Antoine Groudiev AU - Matthijs Douze AU - Loïc Cabannes AU - Pierre Emmanuel Mazaré AU - François Fleuret AU - Maximilian Beck AU - Gergely Szilvasy AU - Naila Murray AU - Hervé Jégou PY - 2026 UR - https://arxiv.org/abs/2609.31975 ID - 2609.31975 ER -