代的期间，因为藩主的亲戚、幕府的旗本松下嘉兵卫摸他的头，当时这是非常失礼的行为，他把松下嘉兵卫打了个头破血流，因此被免除了职位并且家禄被没收大半。
旗本松下嘉兵卫平时就比较“诙谐”，喝点酒容易上头，喜欢乱开玩笑。当时同席的另外两个与土佐藩有亲属关系的幕府旗本也被嘉兵卫戏弄了，但这两位一笑了之，只有吉田跳出来暴打嘉兵卫。
也不能说吉田打人不对，很多人都对嘉兵卫的戏弄不满，但一般的处理方式要么是置之不理，此时嘉兵卫并不会太过分，或者是辞严色厉呵责，嘉兵卫也不会翻脸，总之，嘉兵卫有点二皮脸的意思。
土佐山内家在幕末与幕府没啥亲密关系，全靠与旗本联姻保持亲近，作为山内家的“参政”，把跟本藩亲近的旗本打个头破血流，基本上可以认为吉田政治不成熟——不过当年发生了“廷臣八十八卿列参事件”，朝野有不少人反对幕府的开国政策，吉田和赖三树三郎、藤田东湖等反对开国的人士交好，也许是借此表达对幕府的不满？历史的阴影太多，实在是不好分辨。
直秀怕吉田东洋发飙，他进一步解释说，他听说吉田办了个私塾，他游学游的囊中羞涩希望在吉田办的私塾中担任老师挣点路费。
“原来是误会，对方不是要办私塾。”吉田官兵卫今年二十八岁，虽然没有离开过土佐，但他能当上处理民政的郡奉行也不是个傻瓜，反正他是不会直接赠给直秀路费的，同时他也挺奇怪，因为在此时吉田根本没有开私塾做塾主——日后吉田是打人被免职后才开办了“少林私塾”，一边研究学问一边教导学生积累势力，对此直秀是记错了，误以为吉田现在就开了私塾。
吉田听了之后沉吟了一会。他对陌生人直秀有没有路费、能不能回家一点都不关心，但这位的虚荣心或者自尊心很强，直秀大老远地送书上门他还是挺满意的，毕竟这说明他声名在外么，说起来直秀还是第一个慕名来访的外地武士，另外他也觉得开私塾是个好主意，此时有名望的学者要么在藩学校任教要么开私塾，反正没有一群弟子感觉说话都不硬气。
“要么开个私塾”，吉田以前不开私塾的原因是他嫌教学生麻烦，他对自己的学问还是比较自信的。考虑之后，吉田对直秀态度温和了一些，他对直秀说“我确实最近有开私塾的打算，但并没有招老师的想法，如果你想教书，不如你自己在高知办了私塾得了，我给你批个条~子”。
吉田作风很刚猛，直秀是幕臣，他下意识地不愿意沾惹，既不愿意送路费也不愿意把直秀招为私塾老师，以免惹上什么流言蜚语，至于直秀办私塾，估计挣笔路费就滚蛋了。至于直秀怎么向幕府解释，关他什么事？有人问起来他也有得搪塞，“总不能看着幕臣流落南海回不了江户吧”。
直秀赶紧答应，拿着吉田的手书就离开了。吉田还是年纪轻没受过什么挫折，终于被直秀成功套路了——吉田觉得直秀挣到钱就回江户了，直秀觉得《三国演义》吉田是白读了，最起码“刘备借荆州”这回他没读懂，直秀可是准备在土佐圈一批学生的，最起码直秀未来会断断续续在高知待个两年左右。按直秀的经验，对这种上门送书要路费的事情，要么装糊涂干脆不管，要么快刀斩乱麻直接上奏藩厅，走程序正义这条路，剩下的处理办法都有后患。
欺负老实人有罪，直秀也不是真想坑吉田东洋，当然他也坑不到，土佐这帮武士，不管地位高低，着急起来就拔刀相向。吉田的条~子能帮助直秀在土佐国打开局面，等直秀在佐贺搞三搞四的时候，起码也是十年后了，按直秀的规划，对吉田的仕途还大大有利，总之，按直秀的概念应该不算套路算双赢吧。