Но вот в 1187 году над христианским Иерусалимским королевством разразилась беда: город был захвачен султаном Саладином. Понадобился еще один Крестовый поход. Сначала совместными действиями королей Англии и Франции был отвоеван город Аккон. В результате мирного договора с султаном христианам даже дали право на безопасные паломничества в Иерусалим. Но без помощи Византии крестоносцы были не в состоянии вернуть себе Святой город. И Четвертый крестовый поход обернулся уже против Константинополя.
Только Пятый крестовый поход, в который в 1228 году отправился Фридрих II, дал католическому христианству возможность вернуть Иерусалим. В городе крестоносцев Сен-Жан д’Акре Фридрих II встретился для переговоров с египетским султаном Аль-Камилем, и тот без боя передал Иерусалим императору Священной Римской империи. Мирный договор был подписан на десять лет. Император Священной Римской империи гарантировал мусульманам свободный доступ в мечети и их собственные места паломничества. Сам Фридрих женилсяна дочери-наследнице короля Иерусалимского и в 1229 году сам был коронован иерусалимской короной.
Кто только не принимал участия в Крестовых походах на протяжении целого столетия: и император Фридрих I Барбаросса, и французский король Филипп II Август, дед короля Людовика IX, и английский король Ричард I Львиное Сердце. Но в 1244 году мусульмане вновь завоевали Иерусалим.
В подобной ситуации французский король Людовик IX отважился уже на Шестой крестовый поход. В конце августа 1248 года король с двадцатипятитысячной армией отплыл на Кипр, передав бразды правления в руки своей матери, королевы Бланки. Вместе с королем отправился и старший брат Жана-Пьера де Вуази, девятнадцатилетний Пьер.
После того как королевское воинство перезимовало на Кипре, оно высадилось в Египте 5 июня 1249 года и на следующий день завоевало Дамьетту. Нападение на Каир весной 1250 года окончилось катастрофой: король Людовик IX вместе со всей своей армией оказался в плену и вернул свободу высокой ценой: непомерными откупными и передачей Дамьетты. Униженная армия отбыла в Сен-Жан д’Акру, последний из городов крестоносцев в Святой земле.
Четыре года король Людовик IX провел в Святой земле. И только весной 1254 года он вернулся во Францию. Вскоре после прибытия флота крестоносцев на родину родители Жана-Пьера узнали, что их старший сын скончался сразу после отбытия из Аккона. Горе де Вуази было ужасно. Отец Жана-Пьера «бежал» в науки, собрав всю доступную литературу о все тех же Крестовых походах. Это был его способ пережить утрату сына.
Барон Пьер III де Вуази долгие годы внимательно изучал все рисунки и все эскизы ландшафта, корабли и битвы, описанные в книгах и свитках, и наиточнейшим образом подсчитал количество солдат и оружия, деньги и пожертвования, отпущенные на каждый крестовый поход. Он даже постарался проверить все письменно зафиксированные воспоминания отдельных крестоносцев. Он стал самым настоящим экспертом истории Крестовых походов.
Больше всего барона интересовала теологическая обоснованность походов, о которой говорили папы и святые, например знаменитый Бернар Клервосский. Изучая все эти труды, барон сделался решительным противником всего «предприятия». И не потому, что испытывал симпатию к мусульманской религии и магометанам—они были ему чужды,—а оттого, что не понимал, почему католическое христианство, верное папе римскому, должно идти на такие кровавые жертвы ради христиан в Святой земле, которые все поголовно были еретиками и схизматиками.