À l'origine, Raganite (Ragainė) était un établissement de la tribu baltique des Scaloviens. Elle fut contestée par le grand-duché de Lituanie dès sa fondation au XIIIe siècle, et le , il fut conquis par les chevaliers Teutoniques, qui y bâtirent un château gothique. Le château a été appelé Landeshutte, mais le nom de Ragnit, tiré de la rivière locale, affluent du Niémen, a continué d'être utilisé. Le château avait rang de commanderie.
Bien que la localité eût un important château qui protégeait l'État monastique des chevaliers Teutoniques contre les menaces venant du nord, elle restait dans l'ombre de la ville voisine de Tilsit[2]. Le , Ragnit fut incorporée, après la sécularisation de l'Ordre, dans le duché de Prusse qui passa sous la vassalité de la Pologne. Le duché passa au Brandebourg par héritage, en 1618, devenant une partie du Brandebourg-Prusse. Le duché de Prusse devint le royaume de Prusse en 1701. Le roi Frédéric-Guillaume Ier de Prusse accorda le droit de cité à Ragnit, le . Le , une ligne de chemin de fer fut ouverte jusqu'à Tilsit. Elle avait été construite pour développer l'industrie du bois dans la région, mais sans grand résultat et l'économie resta dominée par les produits alimentaires.
Au cours de la Seconde Guerre mondiale, la ville fut prise par les Soviétiques le . Conformément aux décisions de la conférence de Potsdam, elle fut renommée Neman et intégrée dans l'oblast de Kaliningrad de la RSFSR. La plupart des habitants qui n'avaient pas été évacués à la fin de la guerre furent expulsés vers l'ouest de Allemagne.
Population
Démographie
Recensements (*) ou estimations de la population[3]
Bien qu'elle ait fait partie d'États de langue allemande pendant des siècles, la ville comportait une minorité lituanienne et catholique qui avait un certain rayonnement culturel. De 1549 à 1563, le célèbre écrivain et traducteur lituanien, Martynas Mažvydas, y était prêtre et archidiacre. La langue lituanienne fut interdite au XIXe siècle, après l'Insurrection de janvier, dans l'administration de la Lituanie russe et des livres imprimés dans cette langue à Ragnit étaient introduits en contrebande en Russie.