Man kann das Icon einer Bibliothek leider nicht direkt (z.B. über die Eigenschaften) ändern. Hier eine Kurzanweisung um das Icon dennoch anzupassen:

1. Im Explorer das folgende Verzeichnis öffnen: C.\Users\[Username]\AppData\Roaming\Microsoft\Windows\Libraries\
2. Windows Editor öffnen
3. Bibliothek in den Editor ziehen (normales Öffnen funktioniert nicht, da die Bibliothek sich wie ein Verzeichnis verhält)
4. Suche nach "<isLibraryPinned>true</isLibraryPinned >"
5. Gibt es danach eine Zeile "<iconReference>[Icon Infos]</iconReference>", muss man diese ändern, asonsten diese einfügen.
6. Für [Icon Infos] gebt ihr Pfad und Dateiname an, danach duch Komma separiert wählt ihr die Nummer des Icons (bei 0 startend) aus:
   Z.B. C:\Mein\Pfad\MeineDatei.exe,3 um das vierte Icon der Datei MeineDatei.exe auszuwählen
7. Speichern und schließen