Конечно, кому-то это удобно (намного лучше отключить, и самому закреплять какие надо), но когда их скапливается там штук 5, это начинает мешать. Можно удалить их вручную, а можно просто запретить Windows прикреплять их туда.
Для этого откройте Проводник, нажмите на Файл слева вверху > Параметры > Общие >
Уберите галки с обеих пунктов в подменю Конфиденциальность и очистите журнал проводника:
Все, больше часто используемые папки и файлы не будут появляться на панели быстрого доступа (Ну за исключением добавленных самостоятельно).