Auch Windows 11 kann rar nicht nativ, also musst Du sowieso ein separates Programm installieren. Je nachdem welches Programm Du installierst gibt es unterschiedliche Optionen, ich weiß aber, dass 7-Zip genau das kann, was Du suchst. Einfach alle Dateien markieren, dann einen Rechtsklick auf eine der markierten Dateien machen, dann gibt es im Kontextmenü einen Punkt 7-Zip, wo einen entsprechenden Unterpunkt gibt, über den alle Dateien entpackt werden können.