Ivey creció jugando Fútbol americano, baloncesto y fútbol y practicando karate. Comenzó a concentrarse en el baloncesto como estudiante de primer año en la escuela secundaria.[1] Jugó en el Marian High School en Mishawaka, Indiana en sus primeros tres años.[2] Para su último año, fue transferido a La Lumiere School en La Porte, Indiana, uniéndose a uno de los mejores programas del país.[3]
Fue elegido en la quinta posición del Draft de la NBA de 2022 por los Detroit Pistons.[7] Debutó en la NBA en el primer encuentro de la temporada, el 19 de octubre de 2022 ante Orlando Magic, anotando 19 puntos. Su máxima anotación llegó el 27 de marzo de 2023 ante Milwaukee Bucks donde anotó 32 puntos.[8] Esa temporada acabó disputando 74 encuentros, 73 de ellos como titular.
Durante su segundo año en Detroit, el 7 de febrero de 2024 ante Sacramento Kings consigue 37 puntos.[9] Esa temporada disputó 77 encuentros, 61 como titular.
En su tercer año con los Pistons, el 25 de noviembre de 2024 ante Toronto Raptors consiguió la canasta ganadora sobre la bocina.[10] El 1 de enero de 2025 se lesionó en un partido ante Orlando Magic. Se le diagnosticó una fractura de peroné en la pierna izquierda y se perderá, al menos, el resto de la temporada regular.[11]