Janovitz continúa diciendo: "La música llega tan cerca del country-rock definitivo o del country-soul de Stax como cualquier cosa de la época, salvo Gram Parsons - una influencia inmediata en los Stones".
Janovitz dice de las letras: "«Torn and Frayed» sigue a un guitarrista vagabundo cuyo 'abrigo está desgarrado y deshilachado".
Richards proporciona la base de la canción con una guitarra acústica y una Fender Telecaster eléctrica.
El órgano es aportado por Jim Price y el piano es de Nicky Hopkins.
La canción también ha sido versionada por Phish durante sus covers de Exile on Main St.