Думаю, заморозки к осыпанию отношение прямое имеют, у нас в этом году по крайней мере. Из-за холодной весны, заморозка, распускание позднее, цветение сдвинулось на две недели примерно, потом сразу летняя жара и цветущие соцветия под ней. Не удивительно, что сыпались. Ну и горошение может быть, колпачки присыхают, не дают нормально опылиться.
Обычно везде пишут, что дожди сильно мешают опылению. У нас весна как правило сырая, редкий год когда цветение проходит в погоду сухую и одновременно не очень жаркую, и по наблюдениям могу сказать, что дожди меньше вредят, чем жара за +30С.