Affleck gik på George Washington University, men skiftede til Columbia University i New York City, hvor han bestod i fag som fysik, astrologi og western psykologi, alt imens han boede hos sin bedstemor.