Можно попробовать акриловой краской покрасить края гипса. Акрил когда застывает становится средним между резиной и пластиком. Можно в пару слоев для уверенности.
Акрил можно мазать только на сухой гипс, на влажный не ляжет.
О его токсичности мне не известно.

Есть краски, которые при высыхании становяться как резина. Я такой бетон красил. Специальная краска по бетону, влагостойкая, название не помню. Этим лето после того, как обрезал деревья даже ей срезы обрабатывал вместо взвара. Думаю самое оно будет. У меня старая банка была, я когда ее открыл, почти сухая краска стала как резина.