オールバニ公は2度結婚した。最初は1361年にメンティス女伯爵マーガレット・グラハム（1334年ー1380年）と結婚。彼女との間に以下の7人の娘と1人の息子を儲けた。

・ジャネット・ステュアート、デイヴィッド・モウブレーと結婚

・メアリー・ステュアート、ウィリアム・アバーネシーと結婚

・マーガレット・ステュアート、ジョン・スウィントンと結婚

・ジョアン・ステチュアート、ローン卿ロバート・ステュアートと結婚

・ベアトリス・ステュアート、第7代ダグラス伯爵ジェイムズ・ダグラスと結婚

・イゾベル・ステュアート、第7代ロス伯爵アレグザンダー・レズリー、のちハリバートン卿ウォルター・ド・ハリバートンと結婚

・マードック・ステュアート（1362ー1425）オールバニ公。ジョアン・ダグラス、後レノックス女伯爵イザベルと結婚

・マージェリー、キャンベル卿ダンカン・キャンベルと結婚