- 'It Ain't Me Babe' aparece como a última faixa do Side 2 do quarto álbum de estúdio de Dylan, Outro lado de Bob Dylan . Este foi o álbum lendário que Dylan gravou em uma única sessão de estúdio durante toda a noite, auxiliado por 'algumas garrafas de Beaujolais'. A última tomada master foi na lata por volta de 1h30.
- Segundo a lenda, a linha de abertura 'Go away from my window...' é uma homenagem à música 'Go 'Way From My Window' do cantor folk John Jacob Niles - Dylan citou Niles como uma influência inicial.
Também o refrão 'não, não, não, não sou eu, querida' é uma chamada de volta para os Beatles 'ela te ama, sim, sim, sim', como ouvido na música 'She Loves You'. - Esta foi uma das músicas que Dylan recebeu um arranjo elétrico quando iniciou os shows de guitarra elétrica em 1965.
- O admirador mútuo de longa data Johnny Cash fez um cover dessa música com as bênçãos de Dylan para seu álbum Especial Flor de Laranjeira . Joan Baez, Peter, Paul and Mary, Johnny Thunders e The Turtles também fizeram um cover, com a versão do The Turtles alcançando o 8º lugar nas paradas de singles dos EUA.
- As letras para Outro lado de Bob Dylan foram uma consequência de sua tentativa de publicar um livro de poesia na época. O livro ainda não pegou, mas Dylan se beneficiou do exercício mental mesmo assim. Isso também foi um ano após o assassinato de Kennedy - você consegue ouvir uma alma mais intensa nas letras? Especialmente com canções como 'Chimes of Freedom', o estudioso de Dylan Clinton Heylin notaria que Dylan renasceu como um poeta da estrada.
