正安寺は、佐久市中込から富岡街道（国道254号）を車で5分ほど進んだあたり、街道のほど近くに位置しています。富岡街道は佐久と群馬県下仁田町をつなぐ由緒ある街道で、荒船山を望む風光明媚な立地です。
長野県を代表する行楽地・軽井沢にもほど近く、また佐久の市街地は、北陸新幹線の佐久平駅を中心に、風情ある旧市街の中込や岩村田など、住みよい街として知られています。