Τα τραγούδια του “Push The Sky Away” δημιουργήθηκαν τον τελευταίο χρόνο και εκφράζουν ίσως το πιο σημαντικό στοιχείο της μουσικής του Κέιβ (Cave), την αξία της θλίψης μέσα από την οποία μπορούμε να ζήσουμε την αληθινή ευτυχία. Αντανακλούν επίσης την γνώση ότι όλες οι μεγάλες ανακαλύψεις και η πρόοδος των προηγούμενων αιώνων οδήγησαν στην κοινωνική και περιβαλλοντική αποσύνθεση που μας περιτριγυρίζει. Η επικρατούσα αίσθηση πάντως κατά την ακρόαση δεν είναι της απελπισίας αλλά μια ατμόσφαιρα ηρεμίας και γαλήνης.
Το “Push The Sky Away” ηχογραφήθηκε σε ένα παλιό κάστρο του 19ου αιώνα στη Βόρεια Γαλλία, με παραγωγό τον Nick Launay. Η μπάντα έζησε για ένα διάστημα εκεί φτιάχνοντας το album σε μια ομαδική ζωή που βοήθησε και στις ηχογραφήσεις.
Το “Push The Sky Away” διαθέτει μια γλυκειά παραξενιά που βασίζεται στην άρνηση να γίνουν αποδεκτά όρια, τόσο στη χρήση των ήχων και των οργάνων, όσο και στους στίχους ή τους πνευματικούς του ορίζοντες.