Можно ли фикус держать на подоконнике, где зимой батарея греет?

В принципе можно.

Но вот только желательно - на радиатор батареи - приспособить емкость для воды и - регулярно её туда подливать. Это для того, чтобы увеличить влажность воздуха.

Второе...

Для защиты растений - необходимо на подоконнике - поставить преграду для сухого воздуха от батареи отопления.

Хотя бы - натянуть п\э пленку.

И третье - регулярно поливать растения. Кроме тех, что отправили на зимовку в прохладное место.

Нежелательно держать все комнатные растения на подоконнике, когда включают отопление, земля быстро пересыхает и листья желтеют.

У нас просто на батарее лежит плотная хлопчатобумажная ткань, растения не сильно сохнут от этого. Ну или решеткой закройте.