あまり詳しくはないですが、いくつか思い浮かぶのでご参考まで。
1.代替フォントが表示されるまでの時間を遅くする（コンテンツが表示されない時間が長くなるので、あまり推奨されないことかなと思います）
2.WEBフォントの読み込み速度を上げる
・WEBフォントの優先読み込みをする
・使用する分だけ読み込む
・自分のサーバーにアップロードする
・CSSなどの容量が大きい場合、そもそものページコンテンツを最適化して読み込み速度を上げる
WEBフォントをご使用されている時点でご承知済みのことだとは思いますが、いずれの場合もライセンスや利用規約をご確認ください（特に自分のサーバーにアップロードしたりサブセット化したりすることはNGの場合もあります）。