1999 m. gruodžio 31 d. Nepriklausomybės kovų dalyvio J. Vitkaus vardas suteiktas atskirajam inžinerijos batalionui, dislokuotam A. Panemunėje.
2001 m. liepą ant pastato Panemunėje (Kareivinių g. 9) atidengta atminimo lenta: „1999 m. gruodžio 31 d. Atskirajam inžinerijos batalionui suteiktas Nepriklausomybės kovų dalyvio, Pietų Lietuvos partizanų vado, karo inžinieriaus, Vyčio kryžiaus kavalieriaus pulkininko Juozo Vitkaus-Kazimieraičio (1901–1946) vardas“ (skulpt. Vladas Žuklys, archit. Jonas Lukšė: Kauno m. mero 2001 07 05 potv. Nr. 299).
