明治24年（1891年）、ラフカディオ・ハーンは松江の士族の娘・小泉セツと結婚し、この武家屋敷で新婚生活を送った。八雲はこの家の三方を囲む日本庭園を深く愛し、庭に訪れる虫や蛙の声に日本の自然の美を見出した。代表作「知られぬ日本の面影」はこの家で執筆され、日本文化を西洋に紹介する金字塔となった。