Re: 時間があるのでバンコクへ少し行こうかと思ったのですが・・

荷物はスルーで、あなただけタイ(バンコク)へ入国（イミグレーションで入国手続き）、
タクシー又はバスでバンコクへ、観光した後、日本行きの便に間に合うように空港へ戻る。
（時間帯によっては道路渋滞があるので余裕をみて空港へ戻りましょう）
空港のイミグレーションで出国手続きの後、帰りの便の待合室へ。

念のため、航空会社日本地区コールセンターへ問い合わせておけば安心でしょう。