Nachdem er in der Saison 2006/2007 zu den Skispringern wechselte, erreichte er bei seinem ersten Weltcup-Springen in Kuusamo mit dem achten Platz einen Platz unter den besten Zehn. Dies bliebe seine beste Einzelplatzierung im Weltcup. Mit dieser Platzierung sicherte er sich scheinbar die Teilnahme an der Skisprung-WM. Aufgrund seiner absteigenden Formkurve wurde er von Bundestrainer Peter Rohwein aber schließlich nicht ins endgültige Aufgebot für die WM in Sapporo genommen. Am 17. Januar 2009 gewann er in Bischofshofen zum ersten und einzigen Mal in seiner Karriere ein Springen im Continental Cup.[1]
Anschließend sprang Ulmer vor allem im zweitklassigen Continental-Cup oder im drittklassigen FIS-Cup. Sein letztes Springen im Weltcup absolvierte er am 9. Januar 2011, als er beim Skifliegen in Harrachov den 38. Rang belegte.[2] Bei der Winter-Universiade im Januar 2011 im türkischen Erzurum erreichte er den sechsten Rang von der Großschanze.[3]
Nach seinem Karriereende arbeitete Ulmer als Sport-Marketing-Manager bei der Vermarktungsagentur triceps.[4] Seit 2022 ist er bei der Sportmarketing-Agentur Sportfive für Wintersport zuständig.[5]