Egyfajta romantikus történet veszi körül az “Utas az 54. életévétől” képet. Lautrec barátja, Giber társaságában, aki Franciaország délnyugati részét akarta látogatni, úgy döntött, hogy hajóval utazik, hogy partra szálljon a Bordeaux kikötőjében. A Worms tulajdonában lévő hajó Dakar kikötőjébe vitorlázott. Le Havre-ban, ahol a társak felszálltak a hajóra, Lautrec jelentős tartalékot vitt magával, természetesen az alkoholt is tisztességesen készletezték. A nyugtalan vidám fickó egészen edényekkel szolgálta fel a hajó legénységét, melyek elkészítésében irigylésre méltó buzgalommal dolgozott.
Az úton lévő idő, bőséges mennyiségű alkohollal és étkezési finomságokkal, észrevétlenül repült, és csak a Bordeauxba érkezéskor észrevette Lautrec, hogy kevés utas között volt egy nő, akit természetes kegyelem és bájos megjelenés kapott. Egy tisztviselő felesége volt, aki posztot töltött be az egyik gyarmati országban. A férjét Szenegálba követte, és nem figyelt a többi utazóra. Az idegen az 54. szám alatt foglalta el a kabinot. Lautrec tervei azonnal megváltoztak, nem mentek le Bordeaux-ban, és Gibernek sikerült visszatartania társát Lisszabonból való távozásáról, bár az excentrikus művész még a világ végéig próbált úszni egy idegennel. A fedélzeten a lelkes festő lírai impulzusát papírra tette.
A litográfia létrehozása 1896-ra nyúlik vissza, az utazás a nyári hónapokban zajlott, de az 54. kabinból álló nőt Lautrec már ábrázolta egy plakáton, amelyet Brüsszelben, a szabad esztétikában mutattak ki ez év februárjában, tehát létrehozásának hivatalos időpontja eltérhet a valódiól.