Forholdene i fængselet havde imidlertid sat deres spor. Broder Rutherford havde pådraget sig en lungesygdom, og som følge heraf fik han en alvorlig lungebetændelse. Af helbredsmæssige årsager måtte han derfor kort tid efter rejse til Californien, hvor han havde nogle slægtninge.

Der blev arrangeret et møde i Clune’s Auditorium i Los Angeles søndag den 4. maj 1919. Offentligheden blev indbudt til et foredrag med titlen „Håb for den nødlidende menneskehed“. Men det skulle holdes af J. F. Rutherford — en mand der lige var blevet løsladt fra fængselet.

Reaktionen var overvældende. Der kom 3500 for at høre foredraget, og omkring 600 andre måtte tage hjem igen fordi der ikke var plads. Broder Rutherford var begejstret! Han gik med til at tale igen mandag aften, til gavn for dem der ikke havde kunnet komme ind, og da kom der 1500. Han var imidlertid så syg at han ikke kunne fuldføre foredraget. Efter en time måtte han afløses af en medarbejder.

Efter den uretfærdige fængsling i 1919 fik broder Rutherford en alvorlig lungebetændelse. Derefter fungerede kun den ene lunge normalt. I 1920’erne rejste han til San Diego i Californien i forbindelse med en lægebehandling, og lægen rådede ham til at tilbringe så megen tid som muligt dér. Fra og med 1929 arbejdede broder Rutherford derfor om vinteren i San Diego, i et hus han havde givet navnet Beth-Sarim.