關於賴布衣的死因,有壹些不同的說法。其中壹種說法是他被人所害,只活了26歲。這個說法的來源是明末清初學者陶自稱的《布衣神相》壹書,書中描述賴布衣因為被人嫉妒陷害而遭殺害。但是,這個說法並沒有被其他史書或資料所證實,也沒有具體的證據支持。
另外壹種說法是他因為看破紅塵,最終選擇了歸隱山林,此後長與青山白雲為伴,人不見其蹤。這種說法的來源是賴布衣的家鄉傳說,據說他在故鄉定南縣鳳山岡的壹座山上隱居,後人把這座山稱為“布衣山”,以紀念他的事跡。
綜合來看,雖然賴布衣的死因存在不同的說法,但是這些說法都沒有被證實,也沒有確鑿的證據支持。