El productor Philip Hinchcliffe solía decir que la apariencia del Cuarto Doctor, bohemia y antisistema, le gustaba a los estudiantes mayores universitarios.

Tras envenenarse por la radiación de los cristales del planeta Metebelis 3, el Tercer Doctor logra regresar a las oficinas de UNIT, donde el Señor del Tiempo K'Anpo Rimpoche le ayuda a regenerarse (Planet of the Spiders).

La compañía del Doctor y Sarah Jane terminó cuando recibió una llamada telepática a Gallifrey, ya que no se permitía la presencia humana en el planeta.

El Doctor se consuela fabricando a K-9 Modelo II (The Invasion of Time).

Tras la conclusión de la búsqueda, Romana se regenera en una nueva forma (Destiny of the Daleks).

Finalmente descarta el dispositivo, diciendo que está harto de no saber hacia dónde va.

Finalmente, el Doctor y sus dos acompañantes se encuentran en un vórtice blanco sin coordenadas, una especie de membrana entre los dos universos.

Sin embargo, el Doctor pronto se encuentra con una figura fantasmagórica que le mira desde la distincia.

Para sus acompañantes, especialmente Sarah Jane Smith, era protector y algo como una figura paterna.

En contraste con esta "existencia externa", enfatiza que encuentra a la raza humana su "especie favorita", como si estuviera estudiándola científicamente.

También podía mostrarse furioso con aquellos que veía estúpidos, frívolos, mal aconsejados, o simplemente malvados.

Cuando se estropea en The Ark in Space, el Doctor declara con pena que es "irreemplazable".

Ella utilizó toda la lana que le dieron, dando como resultado el accesorio absurdamente largo, pero icónico.

[6]​ El productor Philip Hinchcliffe hizo a los encargados de vestuario crear tres abrigos diferentes para que Baker los llevara dependiendo del tipo de historia, el primero el marrón rojizo que llevó en toda su primera temporada; los otros dos abrigos largos fueron uno marrón oscuro (para las historias oscuras de terror) y otro verde claro (para las historias más orientadas a la acción).

La diseñadora June Hudson reveló después en una entrevista que Turner incluso le había dado permiso para eliminar la bufanda si quería.

Las primeras historias del Cuarto Doctor se caracterizaban por una fuerte temática de "Terror Gótico".

Robert Holmes aceptó quedarse para editarlas, pero terminó marchándose tras hacer solo las dos primeras, Horror of Fang Rock y The Invisible Enemy.

Una vez más, tuvo que enfrentarse a la falta de recursos, y Adams decidió escribir su última historia, Shada.

Instituyó unos cuantos cambios al programa, incluyendo bajando el humor e introduciendo más conceptos de ciencia ficción.

Durante su temporada, el Cuarto Doctor se volvió mucho más suave y, a veces, melancólico.

La única que acabó utilizando fue The Leisure Hive, aunque solo tras un fuerte trabajo de edición.

Bidmean hizo esto cambiando al villano de The Keeper of Traken por el Amo.

Las historias del Cuarto Doctor vieron menos enemigos recurrentes (o retornantes) que etapas anteriores.

Por ejemplo, establecía que los Señores del Tiempo solo tenían un número limitado de regeneraciones, lo que es un elemento argumental básico en las historias Mawdryn Undead, The Five Doctors, The Trial of a Time Lord y la película de 1996.

Para el público de los Estados Unidos, que solo vieron el programa en sindicación (mayormente en la PBS, Tom Baker es la encarnación del Doctor más conocido, ya que sus episodios fueron los emitidos más frecuentemente a nivel nacional.

También hizo un cameo en Futurama saliendo del estómago de una ballena espacial, y en otro episodio, donde se le ve brevemente corriendo hacia la TARDIS.

Suele ser parodiado por el imitador Jon Culshaw en la serie de radio y televisión Dead Ringers.

Culsa también dio voz al Cuarto Doctor en el audiodrama de Big Finish The Kingmaker.

En American Dad se mostraba a varios whovians, uno de ellos disfrazado como el Cuarto Doctor.

Como narrador en Little Britain, el propio Tom Baker ha hecho referencias a Doctor Who.