Грибок (если он там есть) смывается специальной жидкостью, можно купить в строймаге, благо недостатка в химикатах сейчас нету. Только всё делать разумеется в перчатках, очках, проветрить, в общем соблюдать технику безопасности. И в последующем не допускать сырости (выше уже сказали про отопление и т.д.).
А с грибком осторожнее-если попадет в лёгкие-вывести его оттуда проблема, к тому же он может вызвать пневмонию.