人の嗅覚は強いので硫化物が1リットルに0.3mg程度の低濃度含まれていても「卵の腐ったような」臭いを感じます。水道法（飲料水）の基準項目に硫化物そのものはありませんが、本来、無味無臭のはずの飲料水に異臭味がすることで飲用不適になります。飲用以外でも、お風呂の湯に使用すると、室内に硫黄臭が充満して不快を感じることもあります。硫黄を含む温泉水を利用する場合、浴室の換気について設備の設計基準が温泉法の中に設けられています。また硫化物は腐食性があり、長期間使用することにより、使用器具（ポンプ、配管等）の変色（黒色）がみられるようになります。洗車、庭の水まきなど雑用水以外の使用は止めたほうが良いと思います。
硫化物は水処理で取り除くことができますが、メンテナンスの費用、労力等から考えて家庭などで行うことは難しいと思います。
なお、ご質問に対する回答は、あくまで回答者個人の見解です。