家を買いたいんだけど、S&P500にしてる2,000万円を使って住宅ローンの金額を減らすべきなのか？？

全財産2000万円くらいをほぼ全額sp500に回し、月10万の賃貸マンションで同棲暮らしをしてる。 
結婚する事になったから家を買おうと思うんだけど、株を全部売って購入資金にするかどうか悩んでる。 
35年ローンで年率1.3%とかなら、株のまま持ち続けたほうが得だと思うけど、借金してまで投資するなの原則に反するとも思う。 
どうしたらいいか意見求む！