すみません。RDSでSQLSERVERのバージョンアップはできますか

はい、可能でございます。 https://docs.aws.amazon.com/ja_jp/AmazonRDS/latest/UserGuide/USER_UpgradeDBInstance.SQLServer.html