Denny Sumargo lantas hidup bersama ibunya yang pontang-panting sendiri memenuhi nafkah keluarga.
Apalagi sebelumnya ibunda Denny yang merupakan keturunan Tionghoa kaya raya nekat meninggalkan keluarga demi sang ayah.
Hal itu jugalah yang membuat ibunda Denny terpaksa menitipkan anaknya di panti asuhan atau rumah ke rumah.
"Nitip dulu di panti, mingguan lah. Cuma dia (ibu) enggak tega. Putar otak akhirnya dia titip ke temannya. Dari situlah saya dititipin, tapi dikasih duit untuk biaya saya," terang Denny.
Beranjak dewasa dengan banyak masalah, Denny Sumargo dihantam masalah berat saat dituding menghamili seorang DJ.
Selama 6 tahun Denny dihujat hingga karirnya hancur karena dituding menelantarkan buah cintanya dengan DJ Verny Hasan.
Hingga akhirnya di tahun 2019 Denny Sumargo berhasil membuktikan dirinya bukanlah ayah dari anak itu lewat tes DNA.
"Hanya satu-satunya artis yang dituduh menghamili dan bisa membuktikan (salah) itu hanyalah saya,” jawab Denny Sumargo.
"Pas conference sampai nangis saya, nangis karena marah, dan tidak terkontrol sehingga emosi yang lebih dominan,” kata Denny.
"Perasaan marah, sedih, kecewa, hancur Lengkap sehingga ketika pas conference tidak bisa membendungnya,” sambungnya sembari mengenang momen 2 tahun lalu itu.