AutoScalingを利用すると固定でインスタンスを確保していくのではコスト的にインパクト大きいでしょうか？

AutoScalingは最大・最小・現在の台数を指定することが可能です。
よって、最大 4台、現在 2台、最小 2台、などとすることで、平常時は２台＞高負荷時は４台＞負荷が下がってきたら２台 と言ったようにEC2インスタンスの台数を動的に増減させながらシステムを稼働できます。オンプレミスのように「常に最大台数を揃えてキャパシティを確保しておく」といった運用よりもコストが削減できるようになります。