ruby 自体のコードは、ぱっとはでてこないので、方針を。
https://docs.aws.amazon.com/ja_jp/AmazonS3/latest/dev/ListingKeysHierarchy.html
上記ページなどを参照すると、 aws s3 の api には、区切り文字と prefix を指定して list object すると、prefix の次1階層分のデータを取得できそうなのが、読み取れます。
おそらく、今回ですと、 aws-sdk-s3 を利用して、以下の条件で list_objects するのが、いいのではないか、と思っています。(未検証)
@s3.list_objects({
bucket: Settings.aws.bucket_name,
prefix: 'jazz/chill/',
delimiter: '/'
})