Больше всего помогает герметизация трещин и щелей хорошей поролоновой лентой или качественным силиконом, потому что через них уходит большая часть горячего воздуха. Тщательно проверь по периметру рамы, особенно в углах и в местах, где алюминий соприкасается со стеклом. Расширяющаяся поролоновая лента дёшевая и легко крепится самостоятельно; если найдёшь двусторонний вариант с сильным клеящим слоем - ещё лучше. Также можешь использовать герметизирующий силикон в более крупных зазорах, хотя это потребует больше времени.
Потом рассмотри вариант с теплоизолирующей плёнкой на внутренней стороне стекла. Она приклеивается к стеклу и создаёт воздушную камеру, которая неплохо помогает с теплом. Есть варианты, которые практически незаметны, или более матовые - зависит от того, что тебе меньше мешает. Ещё один дополнительный вариант - повесить толстые шторы или термальные гардины зимой; это не самое красивое решение, если хочешь естественный свет, но работает.
Если есть немного больше бюджета, D-образные уплотнители или поролоновое уплотнение, которое крепится к раме, долговечны и сильно помогают против сквозняков. Комбинируя герметизацию щелей + уплотнители + какое-то изоляционное покрытие на стекле, ты заметишь изменения в счёте за отопление довольно быстро.