Tuvo un hermano menor, Alekséi, que igualmente ganaría prominencia militar y política en Rusia.
En un momento dado, la emperatriz pensó en casarse con su favorito, pero el plan se frustró por su influyente consejero Nikita Ivánovich Panin.
Orlov no era un estadista, pero tenía un ingenio rápido, una apreciación bastante precisa de los acontecimientos y fue un consejero útil y comprensivo durante la primera parte del reinado de Catalina.
Un joven y apuesto oficial, Aleksandr Vasílchikov, se convirtió entonces en nuevo amante de la monarca.
En 1777, a la edad de 43 años, se casó con su pariente de 18 años, Yekaterina Zinóvieva, descrita por varias fuentes como una sobrina o una prima, pero no dejó hijos por ese matrimonio.
La gente puede consolarme, incluso puedo repetirme todas esas cosas que se acostumbra a decir en tales ocasiones... mi única respuesta son las lágrimas estranguladas.