נולד בכפר ליד גיזה שבמצרים לאב שופט, ואם שהייתה נצר לבית רבנים. כבר מילדותו התעניין באמנות וביקר רבות במוזיאון קהיר, שם עסק ברישום המוצגים. רישומיו הקנו לו מלגת לימודים בפקולטה לאמנות של אוניברסיטת קהיר בזמאלכ. אולם, קום מדינת ישראל גרם לפרעות ביהודים ומשפחתו היגרה לצרפת וממנה לישראל. בעת שירותו הצבאי הכיר את רעייתו מרגלית.
בשנת 1974 עברו ויקטור ומרגלית לכפר האמנים עין הוד בין השנים 1980 ועד שנת 2012 חילק חלואני את זמנו בין עין הוד לבין בית וגלריה בקריית האמנים צפת, שם הפך לאחד האמנים המובילים בתקופה זו. ב-2012 שב וריכז את ביתו והסטודיו שלו בעין הוד. ב-1984 החליט חלואני לפרוש מן ההוראה ולהקדיש את כל כולו לפיסול בברונזה. פסליו, בהם פסלים גדולי-ממדים, הוצבו בכיכרות ובגני פסלים בצפת ובקצרין. פסלו "דוד מנגן בנבל" ממוקם בכניסה לכפר האמנים עין הוד. פסלו המונומנטלי "חלום יעקב", נבחר לחנוכת מבנה הקונגרס העולמי לאומנות ע"ש הסנאטור ג'ייקוב יעבץ (Jacob K. Javits Convention Center) ב-1986.
ב-1993 נחנך בצפת פארק הפסלים ע"ש חלואני על פני שטח של 50 דונם. הפסלים המוצבים בפארק: "התקווה לשלום", "הסוס הטרויאני", "עקדת יצחק", "משפחה בעידן החלל ", "רות ונעמי", "מרים והתוף".
בין מקורות ההשראה שלו ציין חלואני את אמנות מצרים העתיקה כפי שנחשף אליה בילדותו, סיפורי התנ"ך אותם הכיר לראשונה באמצעות סיפוריה של בלה אמו, ולאחר מכן מתוך קריאה ולימוד תנ"ך ואהבת אסטרונומיה הכוללת צפייה בגרמי השמיים, היכרות עם יצירות מדע בדיוני וקריאת טקסטים מדעיים בנושא.[2]