A pályafutását a First Viennában töltő Koller hosszabb ideje Alzheimer-kórral küszködött.
Koller 86 alkalommal ölthette fel a válogatott mezét, ezeken öt gólt szerzett. Az osztrák együttessel 1954-ben harmadik helyet szerzett a világbajnokságon.
HIRDETÉS