辞めるのですが…。

私は来月いっぱいで今の病院を辞めます。その理由として前から興味のあった事に挑戦したいからです。その事は師長にも伝えていて、頑張れ！と応援してもらってるのですが、自分の病棟がいま人手不足な事を知っています。私が入ってる委員会も違う方にお願いしなくちゃいけません。そんななか辞めるのがかなり申し訳なくきが引けます。でも辞める事は前から伝えていたし、撤回する気はありません。ただ、私のわがままでよくしてくれた先輩たちに迷惑をかけるとおもうと気が滅入ります。

自分の夢を叶えたいのですが、こういった状況下では辞めるのは間違ってますか？