Den 13. oktober 2015 scorede Mbemba sit første internationale mål, en langdistance vinder i en 2<unk>1 venskabskamp mod Gabon i Visé, Belgien. Han gik også til Afrika Cup of Nations i 2017 og 2019
; i sidstnævnte i Egypten scorede han en sen hovedbold i en 2×2 remis med Madagaskar i de sidste 16, selvom hans hold tabte i en shootout.