istnさんこんにちは。
　
Amazon Redshift でIAM認証は試したことがないのですが、


aws rds generate-db-auth-token –hostname XXXXXXXX –port 5432 –username YYYYYYYY


みたいなコマンドの標準出力をパスワードとして使えればよいのですよね？

データベースの追加と削除でデータベースの登録をするとき、「その他」のタブに「OTP生成コマンド」(Version 2.20.0のベータ版では「ワンタイムパスワード生成コマンド」)上記のコマンドを実行するバッチファイルなどを設定しておけば接続できるのではないかと思います。