El museo fue fundado en 1966 y es administrado como una fundación incorporada a la compañía Idemitsu Kosan.La colección del museo fue recopilada durante 70 años por el también fundador de la empresa, Sazō Idemitsu (1885–1981).), que muestra un subconjunto de la colección del museo original.[3] Tras la recesión que comenzó en el país nipón en 1990, la empresa Idemitsu Kosan vio perjudicada su posición: su beneficio neto bajó en un 70 % en 2001.La colección también cuenta con trabajos de Georges Rouault o Sam Francis.
Fachada de la filial del Museo de Arte de Idemitsu en Moji.
