ホームアプリをドロワー形式に設定されているのですね。
ホーム画面にあるアイコンを長押しして×でゴミ箱に入る場合は、アプリはアンインストールされていません。ホーム画面から見えなくなっただけです。これでもアイコンの整理にはなります。
ホーム画面の何もないところを長押しすると、ホーム設定が出て来るので、そこでランチャーモードを「ドロワー/標準/オリジナル」から選択できます。
ホーム画面で画面下から上にスワイプすると全てのアプリが表示されますので、こちらから長押しすると〇にi の記号が出てきます。こちらからならアンインストールもできます。
不要なアプリはアンインストールするとストレージ(記憶場所)の使用量を減らすことができます。