Lonesome означає "самотній" або "відчужений". Це слово передає глибоке почуття самотності, часто з відтінком туги або меланхолії.
У цій пісні Люк Комбс використовує його, щоб описати своє дитинство: "It was Gotham City lonesome in the living room" (У вітальні було самотньо, як у Готем-Сіті). Це створює яскравий образ дитини, яка відчуває себе покинутою, незважаючи на те, що знаходиться вдома, підкреслюючи емоційну порожнечу через відсутність батька.
«All I Ever Do Is Leave» — це зворушлива історія про те, як дитяче сприйняття може відрізнятися від реальності. Люк Комбс співає від імені хлопчика, який пам'ятає своє самотнє дитинство. Його тато завжди був на роботі, тому хлопчику доводилося самому грати в м'яч і бути одночасно і Бетменом, і Джокером. Здавалося, що все, що робив його батько, — це просто йшов з дому.
Але, ставши дорослим, герой розуміє, що любов батька проявлялася в непомітних дрібницях: він був і зубною феєю, і тим, хто виносив сміття, і тим, хто дбав, щоб у домі завжди було світло та затишок. Найсильніший момент пісні настає, коли оповідач усвідомлює, що тепер він сам став тим самим батьком, який багато працює заради сім'ї. І він лише сподівається, що його власний син не думає, ніби все, що він робить, — це йти.