No hace falta que vayas una por una, selecciona todas las canciones del álbum de golpe (clic en la primera canción + shift y clic en la última), y luego ya vas a obtener información y pegas ahí la imagen. Cuando aceptes, todas las canciones seleccionadas se pondrán con la imagen que hayas pegado.
Espero que sea eso lo que buscases...