他在染谷的日子一天一天难过，当甲贺的大师兄回来之后，听说了这件事，勃然大怒，立刻向服部征人发出挑战，并约定谁输掉了，永远不许走进日本本土半步。服部征人答应了，虽然他知道当时他肯定能得到甲贺大师兄，但是为了忍术的传承，他选择了认输，离开日本，并自此再也不踏进日本半步。

这就是为什么服部征人会一直居住在中国，而从来不返回日本的原因。而这次柳灵素要来日本，服部征人非常担心，只能派佐田悄悄的跟着，以便他能暗中保护。