ビットで表現されてないものをその場でビット表現に直してもスマートにはならないと思われます。ビット表現に直したものをあらかじめ作るかキャッシュすると意味があるかもしれません。

昔ながらの局所最適化で、大きな整数型でまとめて読むと早くなるケースがあります。が、スマートとは言い難いですね。

    alignas(int32_t) unsigned char hoge[NUM];

    bool IsAnyFlag() {
      assert(NUM % sizeof(int32_t) == 0);
      for (size_t i = 0; i < NUM; i += sizeof(int32_t)) {
        if (*reinterpret_cast<int32_t*>(&hoge[i]))
          return true;
      }
      return false;
    }