Setelahnya, Billy Keraf mencoba peruntungan dengan trial di PSM Makassar sebelum kick-off Liga 1 2022-2023. Akan tetapi, ia tak lolos seleksi dan tak masuk pilihan pelatih Bernardo Tavares.

Gagal di PSM, winger lincah kelahiran 8 Mei 1997 itu lantas bergabung dengan klub promosi Liga 2, PSDS Deli Serdang. Billy sempat tampil tiga pertandingan, sebelum akhirnya kompetisi tidak dilanjutkan.

Kendati prestasi dan kualitasnya terus mengalami penurunan, Billy ternyata punya satu gelar juara, yakni Piala AFF U-22 di Kamboja.

Billy merupakan salah satu pemain yang dipanggil pelatih timnas U-22 saat itu, Indra Sjafri. Dia beraksi dalam dua pertandingan di Grup B, melawan Myanmar dan Malaysia.

Sebelum mengangkat trofi Piala AFF bersama timnas Indonesia U-22, dia adalah anggota Timnas U-16 tahun 2015 asuhan Fakhri Husaini.