Дешевая рама со стеклом - вряд ли что-то найдется. Деревянные рамы сейчас дороже пластиковых.
Вариант 1 - если есть рукастые мужчины, то найти деревянную раму (часто меняют, снимают) и переделать ее под размер нужной рамы.
Вариант 2 - додумать пока эту раму. Не пойму - там одно стекло всего сейчас? Или 2?
Дыру заделать монтажной пеной, пропенить хорошо.
Еще доп.мера - низ утеплить. Повесить что-то теплое (одеяло, кусок меха, куртку) на нижний край рамы и закрепить ближе к полу.
Между рам тоже желательно положить слой синтепона или ваты.
(у меня дома такие же проблемы, так что боремся уже много лет.
Дом то деревянный и старый).