静的なコンテンツのみのサイトであれば、S3に配置すればサーバレスなサイトを構築することが可能でしょうか？

S3のみで静的なWebサイトホスティングは可能です。