TY  - RPRT
TI  - In-context Pretraining: Language Modeling Beyond Document Boundaries
AU  - Weijia Shi
AU  - Sewon Min
AU  - Maria Lomeli
AU  - Chunting Zhou
AU  - Margaret Li
AU  - Gergely Szilvasy
AU  - Rich James
AU  - Xi Victoria Lin
AU  - Noah A. Smith
AU  - Luke Zettlemoyer
AU  - Scott Yih
AU  - Mike Lewis
PY  - 2024
UR  - https://arxiv.org/abs/2310.10638
ID  - 2310.10638
ER  -