電話がつながらない

「利用している時間、場所で電波状態が悪い」という可能性が一番高いと思います。

050通話はインターネット等で利用している4G通信をそのまま利用して通話します。
従って、通信が混んでいたり、電波状態が悪い場所では通話が難しくなります。
特にmineoのau回線では3G通信を使えないので、4Gがダメだと厳しいかもしれませんね。

繋がるときもあるという事なので、完全に通信が途絶えてる訳ではないが電波状態が悪い状態、と推察します。

その場所でauの4G電波の状態が悪いとなると対策が難しいですね・・・。

・docomo等の別の回線を利用する
・ダメ元で機内モードON/OFFしてみる
・場所を少し移動する

このくらいしか対策が思いつかないですね・・・。

ご参考になれば。

ご使用の端末、接続手段(Wi-Fiかモバイルデータ通信か)、IP電話サービス名、相手の電話種類(固定・携帯・IP電話など)を教えてください。
「日曜日正午ごろに毎回同じ場所」とありますが、何度位ありましたか。また他の日時や場所で起きたことはありませんか。
接続できないときはずっとできないのか、何らかの方法でつながるようになるのか、時間を置けばつながるのか、その辺りも教えてください。

私も、質問者様のように繋がらないような事が多々あります。特に回線が混雑しているお昼頃などは注意が必要です。
会社では、接続が不安定なIP電話の使用を禁止しているところもあるくらいですから。