האתר שבו הוקם כפר הנוער נקרא עד לראשית המאה ה-20 בשם "בית עריף" והיה אחת מהאחוזות של הכפר הערבי נעלין.[3] היישוב בית עריף נזכר באונומסטיקון (אוסביוס) מן המאה ה-4 לספירה והוא מופיע גם במפת מידבא.[4] עם קום המדינה, הועתק השם ההיסטורי לאתרו של הכפר הערבי דיר טריף עקב המצלול הלשוני (בית עריף).
כפר הנוער נוסד בשנת 1927 על אדמות בית החרושת חדיד על ידי ד"ר זיגפריד להמן, מתוך מטרה להנחיל לילדים ולנוער ערכי ציונות, עבודת האדמה והערכת בני האדם. מבני הכפר תוכננו על ידי האדריכל הארצישראלי פריץ קורנברג. וילפריד ישראל שימש בתפקיד נשיא כפר הנוער בן־שמן משנות העשרים ועד יום מותו (1943)[5]. הראשונים שהתחנכו בכפר היו ילדים מקובנה. עם הזמן הצטרפו לכפר תלמידים חדשים מן הארץ ומחוצה לה.
ב-1932 קלט כפר הנוער את הקבוצה הראשונה של עליית הנוער, קבוצה של 12 נערים ונערות שהגיעו ארצה על ידי רחה פראייר. קבוצה זו סימנה את תחילתה של תנועת עלייה גדולה, שמנתה בסופה מאות אלפי ילדים ובני נוער מכל תפוצות ישראל.
ב-1940 נערך כאן חיפוש אחר נשק על ידי הבולשת הבריטית ונאסרו המנהל וצוות ההוראה, משפטם, משפט בן שמן, עורר סערה גדולה.
במלחמת העולם השנייה קלט הכפר כמות נכבדה של ילדים פליטים מאירופה אשר ברחו מאימי השואה. ילדים אלו השתלבו לאחר מכן במערכות הביטחוניות וההתיישבות הציונית והיוו דוגמה מכוננת להצלחתו של כפר הנוער והצוות החינוכי שבו להנחיל ערכים תחת מחסור תקציבי ואיומים קיומיים. חניכי וחניכות הכפר שילבו לימודי חקלאות עם אימונים מטעם ארגון ההגנה.
עד קום המדינה היה מוקף הכפר ביישובים ערביים. לפי תוכנית החלוקה של האו"ם משנת 1947 היה המקום אמור להיכלל בשטח המדינה הערבית. כפר הנוער ובצמוד אליו הכפר בן שמן (כיום - כרם בן שמן) היו במצור מיד לאחר קבלת החלטת החלוקה ב-29 בנובמבר 1947, והסתמכו להגנתם על כלי נשק שנמצאו בסליק חבוי[7].
רוב מורי ותלמידי כפר הנוער פונו לפנימיית נעורים ליד נתניה. אפשר היה להגיע למקום רק בשיירות. שיירה שיצאה לבן שמן ב-14 בדצמבר 1947 הותקפה ליד מחנה בית נבאלא על ידי חיילי הלגיון הירדני ו-13 מאנשיה נהרגו (שיירת בן שמן). לאחר מכן הסכימו הבריטים לתת ליווי צבאי לשיירות לבן שמן עד צאתם מהארץ, ואחרי צאתם, קויים הקשר רק על ידי מטוסים. הערבים היו צולפים על מסלול הנחיתה ולאחד הטייסים, צבי זיבל, הוענק אות גיבור ישראל על אומץ ליבו בקיום הקשר עם בן שמן. הגנת המקום הוטלה על פלוגה מגדוד 54 של חטיבת גבעתי. ב-14 במרץ1948 הגיעה למקום בשיירה, פלוגה א' של גדוד 51 גבעתי (הפלוגה הדתית של חי"ש תל אביב), בפיקודו של אליהו חן-ציון שהגנה על המקום, ביחד עם התלמידים הבוגרים, כל תקופת המצור עד להסרתו במבצע דני.
בכפר קיים מרכז למידה הפועל בשעות אחר הצהריים והערב, המספק תמיכה לימודית אישית ומלווה בצוות מורים מקצועי, מערך תמיכה רגשית רחב הכולל פסיכולוגים ועובדים סוציאליים וכן פעילויות חברתיות, ביניהן להקת הזמר בניצוחו של עופר שריקי.
אתרים בכפר הנוער
כפר הנוער בן שמן הוכרז כאחד מ-50 אתרי מורשת ותקומה לאומית לשימור.
בשנת 2012 נפתח חדר התיעוד ע"ש ריכרד לוינזון - מכיל 40 שנים של תיעוד שנצבר על ידי מר ריכרד לוינזון, בנוסף למסמכים רבים אחרים שנשמרו בכפר ב-87 שנים האחרונות. כיום קיים בחצר חוות הניסיונות מוזיאון לתולדות המקום
ב-29 בדצמבר2014 נחנך בבריכת המים של הכפר, המשכן לאומנות - לאה מיכלסון, בו נמצאים כ-70 מפסליה של האמנית שהתחנכה בכפר.
אלתר ולנר: חמושים לפני המחנה - סיפורה של הפלוגה הדתית של חי"ש תל אביב, הוצאת משרד הביטחון – ההוצאה לאור, 1984
אוריה בן־ישראל, בן שמן - חממה להתחלות רבות, בתוך: זאב ענר (עורך), סיפורי בתים: סיפורם של שבעים בתים בתולדות ההתיישבות, משרד הביטחון – ההוצאה לאור, 1988, עמ' 231–233