明治40年に木骨コンクリート建て旧県洋服会館を利用したレストラン。現在は閉業している。中庭の駐車場から建物を見ると、真ん中の一番大きな木が桂翠館のシンボルとなっている桂の木があり、そこからこの名前が付けられている。天井を見上げると当時のままの太い梁がむき出しに見え、明治時代のモダンな装飾とマッチしている。漫画「僕らはみんな河合荘」で登場した書生カフェのモデルにもなっている。