Se casó con Elva Brassard en 1945 y tuvo un hijo, Lawrence F. O'Brien III.

Acompañó al presidente John F. Kennedy y a su mujer en su viaje a Texas en 1963, que era parte de su estrategia para su renovación en el cargo al año siguiente.

Tras el atentado que costó la vida al presidente, O'Brien acompañó el féretro y a la Sra.

Negoció además el mayor contrato televisivo hasta la fecha con la cadena CBS.

Fue incluido en el Basketball Hall of Fame, sito en su ciudad natal, Springfield, Massachusetts en 1991.