Nacido en Shibata (Niigata), Togashi se trasladó a Estados Unidos en 2009 donde asístió el instituto Montrose Christian School de Rockville (Maryland).

[1]​[2]​ Disputó 3 temporadas, incluyendo en 2011, un victoria en la final nacional ante el Oak Hill Academy.

Se graduó en 2012, pero no recibió ninguna oferta universitaria para jugar en la NCAA, y decidió volver a Japón.

Se convirtió en el jugador más joven en formar part del mejor quinteto de la liga, y fue MVP del All-Star disputado en enero de 2014.

[11]​ Fue traspasado esa misma noche a los Texas Legends, el equipo afiliado de los Mavs.