TY - RPRT TI - Tokenizer Choice For LLM Training: Negligible or Crucial? AU - Mehdi Ali AU - Michael Fromm AU - Klaudia Thellmann AU - Richard Rutmann AU - Max Lübbering AU - Johannes Leveling AU - Katrin Klug AU - Jan Ebert AU - Niclas Doll AU - Jasper Schulze Buschhoff AU - Charvi Jain AU - Alexander Arno Weber AU - Lena Jurkschat AU - Hammam Abdelwahab AU - Chelsea John AU - Pedro Ortiz Suarez AU - Malte Ostendorff AU - Samuel Weinbach AU - Rafet Sifa AU - Stefan Kesselheim AU - Nicolas Flores-Herr PY - 2024 UR - https://arxiv.org/abs/2310.08754 ID - 2310.08754 ER -