Родился Виктор Перес 18-го октября 1911 года в Тунисе, в еврейском квартале Хавсия. Рос в многодетной семье ещё с пятью детьми, в очень скромных условиях. С раннего детства восхищался сенегальским чемпионом Бэттлингом Сики, из -за которого и захотел заняться боксом. В свои 14 лет вместе со своим старшим братом Бенджамином пришел в боксёрский клуб «Маккаби». Уже через 2 года парень решил выступать в профессионалах, за что и получил своё прозвище «Молодой».  Первое время Виктор выступал на родине и в соседнем Алжире, где успел провести 15 боёв, из которых 13 выиграл. Но перспективы в родных краях не особо радовали юного боксёра, и поэтому в 1927 году он принимает решение перебраться во Францию (Тунис на тот период был Французской колонией). Финансовое положение парня оставляло желать лучшего, из-за чего он был вынужден устроиться продавцом обуви в парижском магазинчике, а сразу после рабочего дня бежал на вечерние тренировки по боксу под руководством Леона Белье, который вскоре подписал с мальчишкой контракт. 

Под руководством Белье Виктор за 4 года провёл 39 боёв, в которых из 31-го вышел победителем. В результате упорного труда и постепенно приобретённой уверенности в 1931 году Перес смог одолеть Виктора Феррана и Валентина Ангельмана и стать чемпионом Франции в наилегчайшем дивизионе. А в октябре того же года вышел на ринг драться за звание чемпиона мира по версии WBA против олимпийского чемпиона Фрэнка Ди Дженнара. Все были уверены, что Перес проиграет этот бой, однако молодой человек удивил публику, нокаутировав мастеровитого оппонента во втором раунде. На тот момент 20-летний Виктор стал самым молодым чемпионом в истории.  В 20 лет молодой боксёр исполнил мечту всей своей жизни. На него обрушилась слава, с которой он не смог справиться. Виктор стал настолько богат, что решил отдохнуть от тренировок и погрузиться в праздную жизнь большого города. Вместо тяжелой работы в спортивном зале боксёр начал пропадать на вечеринках, транжирить деньги, завёл множество «друзей», которые были не против выпить «на халяву», а также начал встречаться с молодой киноактрисой Мирей Бален.

Такой образ жизни привёл бойца к тому, что уже через год он проиграл свой титул чемпиона мира британцу Джеки Брауну. После поражения также быстро исчезли все приобретенные друзья и молодая возлюбленная. Виктор Перес вновь решил вернуться к былой славе и дважды выходил на титульные поединки против чемпиона мира Эль Брауна, но выиграть того не смог.  В 1938 году, в возрасте 27 лет спортсмен принял решение завершить карьеру. На тот момент его послужной список составлял 132 боя, из них: 89 побед, 28 поражений и 15 ничьих.  Когда началась Вторая мировая война, Виктор Перес до последнего не верил, что немцы смогут войти в Париж, поэтому уйти из города не намеревался, однако уже совсем скоро все пути к бегству были перекрыты. В 1942 году бывший боксёр проигнорировал приказ, обязавший всех евреев носить жёлтую звезду, передвигаясь по городу, за это был отправлен в транзитный лагерь Дранси под Парижем. А уже в 1943 году Виктора доставили в Освенцим. Комендант концлагеря оказался страстным поклонником бокса и сразу же отобрал Переса для участия в поединках. В противники для маленького боксёра специально подбирались более рослые и тяжелые бойцы, но несмотря на это бывший чемпион всегда выходил победителем. Свой первый бой тунисский боксёр провел против боксёра тяжеловеса, который был выше его на две головы и тяжелее килограмм на 50 (на тот момент Виктор весил около 40 кг). В это трудно поверить, но Перес победил немца нокаутом.

Бойцы в лагере обязывались проводить по 2-3 боя в неделю. Также боксёры освобождались от работ либо посылались на более лёгкие и получали дополнительную миску супа. За победу в поединке боец получал буханку хлеба и тарелку супа с мясом, а проигравшего ждала газовая камера. За 15 месяцев пребывания в Освенциме Виктор Перес провёл 140 поединков, а значит уничтожил 140 людей. Эта мысль мучила боксера постоянно, именно поэтому он старался как можно больше помогать тем заключенным, кто пока оставался в живых. «Премиальной» порцией пайка за победы он всегда делился с нуждавшимися и больными, а, работая на кухне, всегда старался своровать продуктов для других заключенных, хотя это каралось смертной казнью.  Сам Перес вот что говорил по этому поводу: «Это не важно, человек рожден не для того, чтобы жить для себя. Мы живем, чтобы помогать другим». За 3,5 месяца до окончания войны, во время наступления советских войск, нацисты начали отступать и организовали так называемый «Марш смерти». Когда заключенные проходили возле концлагеря Глейвиц Переса застрелили при попытке в очередной раз передать продукты заключенным. Перед смертью он сказал охраннику: «Это мои друзья, и они умирают от голода. Я всего лишь нес им немного хлеба».