En 1983, tras su deserción a Estados Unidos, Béla Károlyi compró 40 acres del Sam Houston National Forest, donde se encuentra el campamento. Un año más tarde, se construyeron las instalaciones de gimnasia y las cabañas y el rancho abrió sus puertas para los campamentos de verano.
Después de que Mary Lou Retton ganara una medalla de oro en las Olimpiadas de 1984, el número de inscritos en el rancho aumentó a 1.400 estudiantes. De 1986 a 1989, la propiedad se amplió a 2.000 acres. El rancho contaba con una instalación de gimnasia artística femenina de última generación, así como con una sala de baile, una sala médica, una oficina, un gimnasio de rítmica, un gimnasio de trampolín y volteretas y un gimnasio de acrobacia deportiva. También contaba con cabañas para los atletas y los entrenadores, comedores, salas de reuniones, sala de televisión y una cafetería.
La parte del campamento tenía unos 36 acres (15 ha). En 2001, el rancho, fue designado por USA Gymnastics como el Centro Nacional de Entrenamiento de Gimnasia Femenina de Estados Unidos. En 2011, el Rancho Karolyi fue reconocido como Sitio de Entrenamiento Olímpico de los Estados Unidos por el Comité Olímpico de los Estados Unidos.
En enero de 2018, USA Gymnastics terminó su contrato de arrendamiento del Rancho Karolyi durante la fase de sentencia del juicio del Dr. Larry Nassar, quien fue declarado culpable de numerosos actos de agresión sexual contra jóvenes gimnastas, muchos de los cuales tuvieron lugar en las instalaciones, donde no se permitía la presencia de los padres. En 2016 se presentó una demanda contra los Károlyis en la que se alegaba que habían tenido conocimiento de los abusos sexuales y «habían hecho la vista gorda».
El 25 de enero de 2018, el Rancho anunció el cierre permanente de las instalaciones en su página web. El 30 de enero de 2018, los Rangers de Texas se hicieron cargo de la investigación criminal del rancho.