現在の年収で教育費、住宅ローンを払っていけるのか

ご年収が額面で500万円、手取りが8割とすると、1か月あたり約33万円（500万円×0.8÷12か月）、それに児童手当を加えて1か月あたり約35万円の生活費でやり繰りされているというところでしょうか。
総務省が公表しているデータによると、4人家族の平均的な生活費は、家賃・貯蓄等を除き約33万円となっていますので、それを参照する限りは決して浪費されているわけではなさそうです。
言い換えれば、ご主人の副業（と奥様のパート収入）が追加されれば、その分がそのまま2,500万円の住宅や老後資金に充てることができそうですね（教育資金はすでにつみたてNISAを活用して貯めておられるようです）。
仮に2,500万円の住宅ローンを組む場合、毎月の返済額は7～8万円ほどになるでしょう（返済期間35年、金利1.35％、元利均等返済とすると、1か月あたり74,722円）。
ご夫婦の老後資金が仮に2,000万円必要だとすると、毎月2～3万円をコツコツと積み立てて運用されることで実現可能であると考えます（毎月25,000円を30年間積み立てると、元本のみで900万となり、年率平均5％の複利で運用できれば2,000万円ほどになります）。
以上より、毎月約10万円の収入をご主人の副業（と奥様のパート収入）によって上乗せすることが、ご希望を実現するためのひとまずの目安となりそうです。
なお、車のローンを早く返済できればよいとは思いますが、積み立てをやめることはお勧めいたしません。将来のためにコツコツと貯めていくことは、長く安心して暮らし続けていかれるためには不可欠です。
現時点で決して浪費されているとは思いませんが、改めて支出全般を見直してみられることを、まずは優先してください。