日本歴史上で最強の代名詞とされる宮本武蔵。 その彼に悲惨な敗北を喫して滅びたとされている吉岡一門。 しかし滅びてはいなかった。 だが、おかげで『宮本武蔵に負けた吉岡さん』。 こんな不名誉を子孫達は虐げられていた。 これを挽回すべく、第22代当主『吉岡憲法』となった吉岡采音は、日本国48都道府県武陽県にある守破離学園に無理矢理転入させられ、『裏の者』戦っていくことになる。 すべては、吉岡流が最強だと世間に認めさせるために…。 武陽県には、隠された秘密と目的があるとも知らずに…。