Nach seiner Rückkehr in die USA hielt sich Oswald mit Gelegenheitsjobs über Wasser. Der später als "Kommunist" präsentierte Oswald trieb sich vor allem mit Rechtsextremen aus dem CIA-Umfeld herum wie David Ferrie, George de Mohrenschildt, Guy Banister und militanten Exilkubanern. Er traf sogar CIA-Desinformationsspezialist David Atlee Phillips und hatte Umgang mit der CIA-nahen Ruth Paine. Von Kennedy soll er ausschließlich positiv gesprochen haben.