Zwischen 1934 und 1959, also auch während seiner Zeit als Kongressabgeordneter, war Fletcher Präsident und Manager der Home Federal Savings & Loan Association. Danach wurde er deren Vorstandsvorsitzender. In den Jahren 1955 bis 1957 gehörte er der kalifornischen Staatskommission zur Kontrolle der Gefängnisse an. Charles Fletcher verbrachte seinen Lebensabend in seiner Heimatstadt San Diego, wo er am 29. September 1985 starb.