El año siguiente, Mitsuhide traicionó a Nobunaga, evento conocido como el Incidente de Honnō-ji y dos semanas más tarde fue vencido en la Batalla de Yamazaki.
Yasuharu fue premiado con un han en la Isla Awaji valorado en 30.000 koku en 1585.
Durante la desastrosa invasión a Corea, Yasuharu encontró múltiples derrotas en contra del Almirante Yi Sun Sin, siendo la más notable durante la Batalla de Isla Hansan, donde perdió su flota completa y casi 10 000 soldados.
En 1600, Wakisaka estaba dispuesto a pelear del lado de Tokugawa Ieyasu, pero se vio obligado a unirse al bando de Ishida Mitsunari, debido a que este incrementó el ejército de Yasuharu cuando permaneció en Osaka.
En años posteriores se le dio otro han, en Ozu, en la Provincia de Iyo, equivalente a 53.000 koku.