その場で相手に聞かなかったのですか?
コールセンター的な所なら、ヘッドセットの接続不良の可能性ありますが？

私のスマホ、楽モ4G　or　光＋Wi-Fi環境で、楽天リンク発着で、ガサガサ雑音はありません。相手モバイル環境や天気・場所で不測に切れることはありますがかけなおします。　相手050-でも音声品質はハッキリ良好です。
多くの影響する要素・条件があるので書き添えるとよいかもしれません。※フリーダイヤルでもNTT　0120-以外もあるので。

フリーダイヤルならRakuten Linkではなく、普通の電話回線ですね。相手の問題では無いですか？
他のところにも掛けてみてはどうでしょう。
Rakuten Linkの通話だとそのようなこともあり得ます。