Gossett ist der Sohn von Louis Cameron Gossett senior und dessen Frau Helen Rebecca Wray. Bekannt ist er vor allem als Darsteller in Militär- und Actionfilmen. Für seine Rolle als Sergeant Emil Foley in Taylor Hackfords Ein Offizier und Gentleman erhielt er 1982 den Oscar als bester Nebendarsteller.