１日たっぷりがベターです

ブリュッセルはグランプラスくらいしか見るところがないので１時間でもOKかと。

一方、ブリュージュは３つの世界遺産が混合するベルギー最大の観光地なのでなるべく１日たっぷり取ることをお勧めです。いわばベルギーの京都です。すくなくとも半日は。
タクシーで旧市街の北に一直線に延びる運河の旧港まで行ってもらい、そこから見る旧市街の尖塔群は圧巻です。
夜の運河べりが最高なので、それを見てからブリュッセルへ。