（ほかの方とは異なり）既存パッケージを使う方法ですが，titlepsというパッケージがあるようです．
https://www.ctan.org/pkg/titleps
とりあえずはこんな感じでよい気がします（が今即興でやっただけなのできちんとはtitlepsのドキュメントをご覧ください．）
\documentclass[uplatex]{jsbook}
\usepackage{titleps,calc}
\newpagestyle{myplain}{
\setheadrule{.4pt}
\sethead
[\Huge\thepage][][第\thechapter 章\hskip 1zw\chaptertitle]
{\sectiontitle}{}{\Huge\thepage}
\widenhead[\fullwidth - \textwidth][0pt]{0pt}{\fullwidth - \textwidth}
}
\pagestyle{myplain}
\begin{document}
あああ
\end{document}