Em agosto de 2000, antes do lançamento do álbum All That You Cant Leave Behind, a revista Rolling Stone publicou uma matéria citando uma canção chamada "Home (This Bird Has Flown)", que a banda gravou e mostrou para a revista. O review sobre a canção dizia que era o mais próximo que a banda já tinha chegado da sua sonoridade da década de 80. Mas a canção acabou não entrando no álbum.
Provavelmente, esta canção veio a ser 'Walk On', que está no álbum. Não se sabe ao certo se ela teve apenas o nome modificado, ou se é mesmo uma canção inédita e que permanece guardada.
'Stir My Soul' é outra canção que apareceu em listagens do álbum, mas foi cortada na última hora.
Bono estava escrevendo nas sessões de ATYCLB, uma canção em homenagem ao seu pai, chamada "Tough". Ele guardou a letra inacabada, e quando seu pai faleceu, após o lançamento do álbum; ele e The Edge escreveram novas partes para a canção e o refrão que ela não possuia, que teve seu título modificado para 'Sometimes You Can't Make On Your Own', homenagem à Bob Hewson gravada para o álbum seguinte da banda, How To Dismantle An Atomic Bomb.
As canções Summer Rain, Big Girls Are Best e Always (provavelmente uma versão alternativa de Beautiful Day) sobraram como B Sides do álbum.
Duas canções gravadas pela banda que acabaram sendo sobras de estúdio das gravações de ATYCLB, foram lançadas posteriormente no álbum digital do Itunes, Unreleased And Rare: Flower Child e Love You Like Mad.
Uma terceira canção do U2 que era inédita, até a banda lançá-la digitalmente pelo Itunes no Unreleased And Rare, gera controvérsia. Isso porque a canção 'Levitate' aparece oficialmente como sendo das sessões de gravação do ATYCLB, de 2000.
Mas em contrapartida, o próprio The Edge revelou que a canção é um outtake das sessões de gravação do ábum POP, de 1997.
Confira o que disse o guitarrista:“Cada álbum do U2 produz a sua parte em idéias inacabadas. Algumas, como Smile, que tem origem nas sessões de gravação do HTDAAB chegaram muito tarde. Outras, como Love You Like Mad, das gravações do ATYCLB se perderam na poeira. Há canções como Beautiful Ghost, das sessões demo do Joshua Tree, e Flower Child, do HTDAAB, que estão à espera de serem reescritas antes de serem acabadas. Há canções como Levitate, das sessões do Pop, que simplesmente não se encaixam. Seja de onde venham, essas idéias são freqüentemente as mais reveladoras, porque são as gravações menos trabalhadas. Por essa razão, elas são muitas vezes as minhas preferidas. Elas são, na verdade, o caderno de rascunhos do U2".