para ter a exibição de imagens no lugar dos icones,basta instalar o cover-thumbnailer e para isso abra o terminal.
Adicione a PPA flozz com o comando abaixo
sudo add-apt-repository ppa:flozz/flozzAtualize o apt-get com o comando abaixo
sudo apt-get update
Instale o cover-thumbnailer
sudo apt-get install cover-thumbnailer
Reinicie o nautilus com o comando abaixo
nautilus -q
Ele vem configurado por padrão para usar a pasta ~/Música, mas vocẽ pode alterar para outra caso queira, basta abrir o cover thumbnailer que se encontra no menu.
Click em adicionar, navegue até a pasta e click em abrir e OK.