小五郎詢問阿稔有關郵票的事情卻得到郵票已經不見了的回答，柯南也明白了小蘭看到的拄拐杖的老人的影子和埝被古琴毆打的真相。而柯南也指出春菜收到的音樂盒其實是秋悟托付給他人送出的。鬧鬼的屋子的真實原因其實是有人背后操作。而秋悟先生的音樂盒其實也只是一般的旅游紀念品而已，真正貴重的是隱藏在音樂盒里暗語所指示出的郵票。

小五郎等人代替園子的父親鈴木史郎出席茶會。茶會舉辦的公館里有著可以變化五種顏色的池塘，池子正中建有由渡廊連接的茶室五彩庵。在等待的過程中眾人聽說了魔物的傳說。終于見到宗師青野木之后卻意外聽到這是他泡的最后一壺茶的宣言。在第二天眾人再次來到在這個有五彩傳說的茶室的時候卻意外發現青野木家的一家之長上吊身亡。

小五郎繼續參加預定開始的連句會。句會中八木澤因現場遺落的自己的物品而作為嫌疑犯被捕。聯句中柯南發現連句中隱藏的信息，推理出犯人但最終“沉睡的小五郎”揭穿犯人的不在場證明。原來犯人在連句的時候變寫下了挑釁的“自白”連句。而不在場證據也因為隱藏在灌木叢下的攝像機而失效。而證據便是犯人的鞋子。

宇佐美過去曾殺害過被害者的孩子。而喝醉酒的宇佐美對事件記憶不清，這樣為案件辯護的英理看來沒有勝望。小五郎雖是想證明宇佐美的不在場證明，卻作為檢察官方面的證人出庭。對疑點懷有疑問的柯南讓小五郎作為辯護方證人再次出庭，進行了新的推理最終指出了犯人的真實身份。美真治的嫌疑終被洗清。

柯南將小五郎麻醉并召集島上的所有人，準備將真相公之于眾，但遲遲未見和葉和服部的身影，在警察的催促中，柯南只好開始對整個案件進行推理，雖然門脅和祿郎最有可能犯案但柯南卻首先排除了他們二人的嫌疑，而當他指出真兇時，在座之人無一不感到震驚，這時，自救成功的服部及時趕到推理現場，更是說出了一個讓兇手都意外的事實。