La partie semblant perdue en Vimeu, André de Rambures rejoint la résistance organisée, qui est sévèrement défaite par les Anglais l'année suivante à Verneuil ; après la bataille, il est contraint de rendre au duc de Bedford la forteresse de la ville, mais obtient cependant les honneurs de la guerre. Cinq ans plus tard, on le retrouve dans la place forte d'Etrepagny, dont il s'est emparé par surprise avec une petite troupe. La malchance le poursuit : assiégé par les Anglais et sans espoir de secours, il doit rendre la place au bout de quelques mois, toujours avec tes honneurs de la guerre.

En 1430, il est capitaine du château d'Aumale. Avec 120 hommes, il soutient un siège de 24 jours contre l'armée du comte de Suffolk. Il doit capituler, mais cette fois écrit Monstrelet, " icelui seigneur de Rambures fut mené prisonnier en Angleterre, où il demeura de cinq à six ans avant qu'il put trouver sa délivrance ".

C'est alors que les partisans de Charles VII commencent dans le Vimeu à marquer des points décisifs. Ecoutons toujours Monstrelet :
" En ce temps fut conquis le fort chastel de Rambures par les Français, et le prit par échelle et d'emblée un certain Charles Des Marets, qui était au seigneur de Rambures, prisonnier en Angleterre, auquel ledit chastel appartenait, lequel avait en sa garde, pour la partie du roi Henri (VI d'Angleterre). messire Ferry de Mailly, et fut par le moyen de cette prise, grand'entrée pour les Français au pays de Vimeu... " En d'autres termes, peu après Pâques 1431, un nommé Desmarets, probablement un des hommes de la troupe d'André de Rambures, à la tête d'une bande de partisans de Charles VII, escalade les murs du château et s'en empare par surprise, sans coup férir ; le chroniqueur insiste sur l'importance de l'événement pour la suite des hostilités dans le pays.