Ван МакКой написал песню, работая штатным сотрудником на студии April-Blackwood Music, однако, первая запись песни была сделана Барбарой Льюис с Бертом Бернсом во время сессий в Нью-Йорке, МакКой и Кендра Спортсвуд были бэк-вокалистами. Сингл был выпущен в июле 1965-го и уже в августе достиг #11 в Billboard Hot 100 и #5 в R&B чартах.
Европейские версии
Первая европейская версия песни была сделана летом 65-го на студии Эбби-Роуд, однако, оставалась неизданной до 1998-го. В октябре вышла версия поп-дуэта Peter & Gordon, ставшая крупным хитом в Великобритании. Несмотря на это, в дань уважения версии Барбары Льюис, они никогда не выпускали свою версию в США.
Шер записала кавер-версию песни в 1990-м для саундтрека Mermaids, её версия повторяла версию Льюис и была спродюсирована Питером Эшером, который в свою очередь записывал песню в составе Peter & Gordon. Версия Шер не звучала в фильме, однако, была выпущена первым синглом с саундтрека в Великобритании и Европе после того, как американский первый сингл «The Shoop Shoop Song (It's in His Kiss)» не оправдал ожиданий, не попав в топ-30 чарта Billboard Hot 100. «Baby I’m Yours» провалился в чартах, достигая лишь #89 в Великобритании. Лейбл, несмотря на это, решил продолжить промосаундтрека и был выпущен новый сингл «The Shoop Shoop Song (It's in His Kiss)» с «Baby I’m Yours» как би-сайдом. Второй сингл возглавил британский чарт и попал в топ-10 многих европейских стран. По совпадению, первую запись «The Shoop Shoop Song (It’s in His Kiss)» сделала Линда Льюисс, ранее записавшая кавер-версию «Baby I’m Yours».