ウチも全然ダメで、調べまくっても、サポートに連絡しても原因不明で、最終的に交換してもらったら嘘のようにすんなり使えました…

LTEランプが黄色点滅の場合は
https://network.mobile.rakuten.co.jp/guide/rakuten-casa/connection/#indicator
に書いてあるように下記の処置を実施してください。
(1) LANケーブルを本体に接続し直してください
(2) モデム／ルーターを再起動してください
(3) ルーターの設定を確認してください
Rakuten Casaを利用するための動作環境
https://network.mobile.rakuten.co.jp/area/rakuten-casa/#environment
(4) 上記を行っても復旧しない場合は、LTEリセットボタンを2秒押して再起動を行ってください
(5) リセット後も復旧しない場合は、コミュニケーションセンターにお問い合わせください
※ LTEの接続上限は16台です。