На основании множества жалоб, поступавших из Ниццы, Амьена, Тулузы, Труа, он дважды — в феврале, а потом в июне 1963 года — подвергался тюремному заключению по обвинению в мошенничестве, злоупотреблении доверием, подделке чеков и неправомерном использовании бланков, подлоге, выдаче чеков без обеспечения и фальсификации. 23 ноября 1965 года он приговорен судом к восьми годам тюремного заключения, трем годам запрета на проживание и 100 000 франков штрафа. Приговор был подтвержден постановлением кассационного суда от 28 октября 1966 года. В соответствии с положениями декрета об условно-досрочном освобождении, определяющими условия снятия наказания, он был освобожден на следующий день после выхода декрета, то есть 17 апреля 1968 года. Решением от 26 июля 1968 года в связи с состоянием здоровья Варги министр внутренних дел дал согласие на отсрочку запрета на проживание в одиннадцати департаментах.
В 1970 году Варга приступил к выполнению обязанностей одного из директоров в акционерном обществе ФИКОДИП. Капитал общества был поделен между четырьмя акционерами, одним из которых являлась дочь де Варги Катрин.
Спустя несколько лет, в 1976 году, Варга выполняет те же функции в обществе СОФИКОП с капиталом в 100 000 франков, поделенным на 100 частей, из которых Катрин де Варга и Патрик Аллене де Рибмон имеют по пять частей каждый, а последний при этом является управляющим делами и консультантом по налоговым вопросам. Основанное в 1962 году, это общество специализируется на рассмотрении спорных вопросов общего характера и проведении экономических и финансовых исследований.
Параллельно с официально заявляемыми профессиональными занятиями де Варга в личных целях продолжал деятельность, которую можно охарактеризовать как находящуюся на грани нарушения закона.
Варга практически никогда не заявлял о своих доходах налоговым органам, что не мешало ему получать до 60 000 франков в месяц.
Будучи «неплатежеспособным» в силу сложных отношений с налоговым управлением и состоя в черном списке французских банков, он не имеет права располагать банковским счетом. Способ, благодаря которому Варга умудрялся помещать свои деньги в банк, и по сию пору остается загадкой. Два поколения полицейских из бригады по финансовым делам обломали себе на этом зубы, но ни один из них не смог понять, куда исчезают деньги, «заработанные» аферистом. Кое-кто считал, что у него в квартире имеется потайной сейф Полиция прозондировала стены — ничего! Возникала также мысль о счете в одном из швейцарских банков, но и здесь не было найдено никаких следов.
Не имея собственных счетов, де Варга был вынужден для ведения дел располагать большим набором подставных тиц всех калибров. Его квартира была оформлена на имя дочери. Он пользовался банковскими счетами отца, племянницы, приемного сына и даже своего преподавателя рисования. Некоторые из этих подставных лиц образовали вокруг него настоящий двор, при котором нередко можно видеть приятных молодых женщин, очарованных, вероятно, различными сторонами его личности. Варга являл собой что-то вроде Распутина махинаций, отличающегося многогранностью, разнообразным очарованием и острым умом. Он интересуется парапсихологией: в 1952 году, под двумя фамилиями — X. Джон и П. де Варга, выходит книга о спиритизме, озаглавленная «Ясновидение и сопутствующие ему феномены»
В тюрьме, подражая Верлену, он написал небольшой томик стихов под общим названием «Пауза», который был отпечатан на «средства автора».
Он занимался живописью и под псевдонимом Пьер Валли изображал на своих полотнах фантастические сюжеты. Не теряя при этом деловой хватки, он использовал своего преподавателя живописи как подставное лицо и направил его талант на то, чтобы провернуть хитроумную комбинацию. «Художнику» заказывались огромные полотна, выполненные краскопультом, которые затем по бешеным ценам перепродавались казино «Де Шарбоньер». Картины, вовсе не претендующие на то, чтобы составить конкуренцию Пикассо, прямым ходом отправлялись в подвалы заведения. Но они позволяли руководству казино заявить в налоговые органы о значительных денежных расходах, что снижало сумму прибыли, облагаемую налогом. Варга, разумеется, втихую возвращал деньги казино. В обмен дирекция казино выдавала ему часть полученной в результате этих махинаций прибыли, которую он делил с художником… Любимыми банковскими счетами Варги были счета его секретаря Эрмины Дельфур. Эрмина имела три счета, в том числе два находившихся постоянно в распоряжении де Варги.
Этот аферист, достаточно умелый, чтобы иногда добиваться для себя амнистии, но недостаточно всемогущий, чтобы совсем уйти от суда, попался по-настоящему только однажды, в деле, связанном с обществом «помощи» жертвам дорожных происшествий. По выходным он объезжал больницы и предлагал пострадавшим в дорожных происшествиях доверить защиту их интересов обществу, которое могло бы добиться от страховых компаний выплаты положенной пострадавшим компенсации за нанесенный ущерб. Варга выплачивал пострадавшим заранее оговоренную сумму, а затем яростно бился за то, чтобы получить максимально возможное от страховых компаний. Вся разница шла в его карман…
Он вышел из тюрьмы 17 апреля 1968 года, воспользовавшись медицинской справкой, выданной с согласия начальника кардиологической службы тюремного госпиталя Нелли Азера. Впоследствии эта женщина с чувствительным сердцем станет его близким другом.
Освободившись, де Варга показывает, на что он способен. Он заводит знакомства в самых различных кругах. Озабоченный поисками «покровителей», он начинает с того, что становится «другом», то есть осведомителем инспектора полиции. х.
Но основная его деятельность развертывается в сфере деловой жизни. Он управляет имуществом, принимает участие в составлении и подписании купчих, пишет справки, отвечает администраторам, занимается разделом имущества, ликвидациями, продажей, страхованием и займами Он становится гением мошенничества. Одной из его специальностей является организованное банкротство… Система проста и столь же вечна, как и легковерность. Де Варга отыскивал одного или нескольких простофиль, которые соглашались вложить свои деньги во многообещающее дело. Как правило, это ресторан с блестящими возможностями. Но как только деньги вложены, торговля начинала чахнуть, и в конечном счете заведение закрывалось Общество объявлялось банкротом, и наивному финансисту некуда было деваться со своими жалобами, поскольку дело прогорело. «Непредвиденные трудности, неверная оценка расходных статей», — утешал огорченный де Варга. .
Он неоднократно прибегал к этой несложной, но прибыльной операции. Используя особые познания в данной области некоего Жан-Жака Арлабосса, ресторатора, уже привлекавшегося к суду за нарушение закона об акционерных обществах, он потопит немало парижских ресторанов, многие из которых имели громкое имя: «Ля Табльдот», «Ле Кав де Муфтар», «Ле Трабукэр» и даже «Лаперуз», излюбленное место встреч деловых людей, находящееся на набережной.
Но интересы де Варги, конечно, не ограничивались только этим. В полусвете мошенников в белых воротничках аферист имел репутацию серьезного «босса», умеющего заставить уважать себя и способного в случае необходимости перейти к жестким действиям.
С теми, кто проявлял повышенное внимание к деятельности де Варги, могло произойти все что угодно. Так, например, судья Пети, который вел дело общества защиты пострадавших в дорожных происшествиях, чудом уцелел при взрыве заминированной посылки, доставленной ему на дом. Другое совпадение — в 1973 году Пьера де Варгу проверяют налоговые органы. Один из инспекторов, выходя из дома афериста, внезапно чувствует боль в правом плече. Оказалось, что это была пуля 22-го калибра, которую сделали почти безобидной, удалив часть пороха из патрона.
Инспектор понял скрытое за этим происшествием предупреждение, но не смог докопаться до его источника, поскольку в тот день он осуществлял проверку в двух местах: у содержательницы публичного дома и у де Варги. Таким образом, было трудно определить, за что именно стреляли.