此时他想到占卜师的预言,他觉得自己可能有大事要来了。不久高岛去神社抽签,神签是凶。那天晚上他回到住处,他从鸟笼子里面拿出切割制作的竹子,急切的制作蓍竹,试着占卜自己的命运,一番操作得到地雷复卦,上六爻动,上六:迷复,凶、有灾眚。用行师,终有大败;以其国,君凶。至于十年不克征。高岛开始思考因为自己的做法所以大败。变卦为山雷颐卦,爻辞上九,由颐,厉吉,利涉大川。象曰:由颐厉吉,大有庆也。遭遇虽然危险,但是生命没有危险。“好吧,在监狱忍耐几年的话,还可以走出来,这可能是现在唯一的希望了。”基内夫拉和戴森发现事情被揭发很快离开横滨,这样日本官员就不会再追究。高岛在没有去处的情况下,觉得独自承担责任,他回到江户在神奈川换乘轿子,回到家里,在妻子的老家,与母亲和妻子做了最后的告别,又拜访了志波左传太的长屋,暂时躲在这里,之后了解到他的同伙被抓的被抓,逃跑的要跑,他最后下定决心,决定自首。九州佐贺大人的锅岛家为他举行了离别宴,拜托九州佐贺大人照顾妻子母亲,然后前往自首。高岛承担了所有的责任,没有把九州佐贺供出来,不久高岛进入监狱,开始了监狱生活,这是1860年冬,高岛29岁。