Milambo è cresciuto nel settore giovanile del Feyenoord con cui ha firmato il suo primo contratto professionistico nell'ottobre del 2020.[1] Ha debuttato in prima squadra il 2 aprile 2023 nell'incontro di Eredivisie vinto 3-1 contro lo Sparta Rotterdam, diventando il più giovane esordiente nella storia del club, record precedentemente detenuto da Georginio Wijnaldum.[2]