京都に現われた旗本退屈男早乙女主水之介は葵祭の夜目明しに追われる女を救った。しかし女は何者かに狙撃されて死んだ。ある夜退屈男は彼を襲った不逞の輩を捕えた。この男は先夜の目明し源七であった。源七は退屈男に先夜の女はかねて探索中の盗賊団の一味であること、女を逃がした為に与力真崎玄十郎が御役御免になったことを話した。退屈男は真崎に会った。真崎は一月程前に長崎で起った南蛮船襲撃事件のこと、その際に船からうばわれた財宝は船で堺に運ばれたらしいが未だに発見出来ないこと等を話した。退屈男は一味逮捕に協力することを約した。退屈男の命で堺の船着場を見張っていた源八は一味に見つかり殺された。捜査線上に山室幽斎なる人物が浮んで来た。退屈男は源八の娘おしづを山室邸に女中として住込ませた。彼女の調査と能舞台工事のために山室邸に入ったきり帰らない職人達の噂をきいた退屈男は折から彼を訪ねて来た山室の娘幾野に幽斎の悪事を明らかにした。能舞台披露の日、山室邸に現われた退屈男は舞台下に隠された南蛮船の財宝を暴いた。幽斎は退屈男に追われて抜け穴から所司代邸に逃れた。全てを知った退屈男は所司代の悪政をも暴き幽斎一味を斬った。五月晴のある日、東海道を行きながら退屈男は乱斗の最中に彼をかばって銃弾に仆れた敵の娘幾野の哀れな女心を思い出していた