El nombre de la ciudad deriva del mandarín y significa "el jardín del melocotón", ya que la zona solía tener muchas flores de melocotón.

Su máxima altura está en el monte Xuebai (雪白山), a 2444 m, cuyo nombre quiere decir nieve blanca.

Plantaron melocotoneros que, cuando florecían por completo en primavera, eran tan hermosos que la gente llamó a esta tierra Toahong (en chino: 桃仔園; en pinyin: Táozǐyuán; en pe̍h-ōe-jī: Thô-á-hn̂g; literalmente, 'melocotonero', 'huerta').

En noviembre de 1901, durante la era japonesa, se estableció en la zona una oficina administrativa local, Toshien Chō (桃仔園廳), que pasó a llamarse Tōen Chō (桃園廳) en 1905.

El Condado Taoyuán administra cinco ciudades municipales, un poblado y siete aldeas (乡):