聞こえなくなる(にくくなる)と?

音声会話が難しくなることが一番困ります。
日常のコミュニケーションに支障が出ます。

相手の会話や周囲の会話内容がわからないと自己不全感や孤立感、周囲からの疎外感などを感じることが多くなってきます。

聞こえない・聞こえにくい人は国内にどれくらいいる?

中途失聴者や難聴者も含め、聴覚障害者は約1,944万人(内、約900万人は難聴を自覚していない難聴者)とのデータもあります。
※「補聴器供給システムの在り方に関する研究」
2年次報告書より(調査期間:2003-2-20~2003-3-10)
『日本補聴器工業会』ホームページ参照

函館市在住の障害者手帳所持の聴覚障害者は平成29年4月1日時点で973人。(「第5期函館市障がい福祉計画」より)
基準未満の難聴者も併せると、さらに人数が増えるのでは…と考えられます。