1352年に兄が死ぬと、ロベールは7歳で伯爵家の家督を継ぐが、母が引き続いて摂政を務めた。だが直後に母がロングヴィル伯フィリップと再婚すると、母の摂政の地位は不安定になった。ロングヴィル伯は、ヴァロワ家のフランス王ジャン2世の王位に異議を唱えるナバラ王カルロス2世（悪人王）の弟という問題のある人物だったからである。