県内外から多くの遠藤文学ファンが訪れる文学館は平成12年（2000）5月13日開館。外海地区が遠藤周作氏の代表作『沈黙』の舞台になったこと、また、遠藤氏自身がキリシタンの里である外海地区の景観を気に入っていたことから、夫人の協力のもと設立された。作家・遠藤周作氏の生涯と足跡、遠藤文学に関わる蔵書約8千点を含む遺品約３万点を収蔵している。展示室には、生前遠藤氏が使用していたデスクが公開されると共に、生原稿、筆記用具といった貴重な遺品が展示され、遠藤氏の執筆する姿が目に浮かぶようだ。