花園明朝・AFDKO版を使えば縦書きに普通に対応しています。
https://kanji-database.sourceforge.net/fonts/hanazono.html
から辿れる
https://github.com/cjkvi/HanaMinAFDKO/releases
\newjfontfamily{\HanaMin}[
YokoFeatures={JFM=jlreq},
TateFeatures={JFM=jlreqv},
]{HANAMINA.otf}%
で添付のようになります。