Mangum stated that he has written songs possibly intended for a future Neutral Milk Hotel release, although these songs went unnamed; the only known song written after In the Aeroplane over the Sea is "Little Birds".
Mangum poängterade att han har skrivit låtar möjligtvis ämnade för en framtida utgivning av Neutral Milk Hotel, dessa låtar är dock obetitlade; den enda kända låten skriven efter In the Aeroplane Over the Sea är "Little Birds".