Jako wyróżniający się pilot, Kiss w czerwcu 1917 otrzymał przybyły do jednostki myśliwiec Hansa-Brandenburg D.I i z uwagi na rozpoczętą ofensywę włoską przydzielony został do improwizowanej eskadry alarmowej Oberleutnanta Elsslera. 10 czerwca 1917 Kiss zestrzelił pierwszy samolot samodzielnie, a następnie 3 dalsze samoloty, udowadniając swoje właściwe powołanie jako lotnika myśliwskiego. Łącznie w eskadrze Flik 24 odniósł 7 zwycięstw.
W listopadzie 1917 Kiss został przeniesiony do eskadry myśliwskiej Flik 55J. W ciągu kolejnych dwóch miesięcy, latając myśliwcem Oeffag D.III, zestrzelił tam 12 włoskich samolotów – większość z nich zespołowo w kluczu z dowódcą eskadry Josefem von Maierem i asem Juliusem Arigim, z którym się szczególnie zaprzyjaźnił. Większość ofiar były to samoloty rozpoznawcze SAML lub bombowce, niewiele było okazji do spotkania myśliwców wroga, lecz mimo to z uwagi na skuteczność, eskadra ta zaczęła być nazywana Kaiser Staffel (eskadra Cesarza).