Paul McCartney estaba volando junto a su "roadi" Mal Evans y mientras comían le pidió que le pasara la sal y la pimienta, pero Paul no le oyó y pensó que había dicho "Sargento Pimienta" y le respondió "espera un minuto, es una gran idea", ambos se rieron y así fue como comenzó lo de nombrar a su próximo disco así en un momento en el cual los Beatles ya no querían ser los Beatles.
Paul comenzó a dibujar como quería que fuera el grupo y así surgió lo de Lord Mayor hasta que le encargaron a l artista Peter Blake que llevara a cabo la idea de la portada.
Les propuso algo como si hubieran tocado en un parque y tras el concierto se rodeasen de la multitud, de una mágica multitud en la que cada uno tenía una historia y así los Beatles comenzaron a darle una lista de personajes. George solamente escogió gurus indios. Al final había incluso una muñeca de Shirley Temple. Las ropas que usaron era de Berman Ltd., unos uniformes peculiares. Había 57 fotos de personajes, desde Dylan a Marlon Brando, pasando por Tony Curtis, Marlen Dietrich, Laurel y Hardy, el boxeador Sonny Liston, los escritores HG Wells, Oscar Wilde y Dylan Thomas, las deidades Buddha y Lakshmi, los científicos y filósofos Albert Einstein y Carl Jung. Se desechó a Hitler y Jesucristo, así como a Gandhi. La sesión fotográfica se produjo el 30 de marzo de 1967 con la cámara Sinar de Michael Cooper.
Por aquella época una portada costaba a la discográfica 50 libras, pero ésta les supuso 3.000, que serían como hoy 68.000 euros. Por vez primera en un disco de rock se imprimieron las letras en el interior de la carpeta