しかし、２０１１年には初期メンバー４人のうち、和田・福田以外の２人が卒業。竹内朱莉、田村芽実、勝田里奈、中西香菜のサブメンバー４人が正規メンバーに昇格し、２０１２年から６人体制となる。
このあたりから観客動員が落ち、なかなかホールでコンサートが開けない状況がつづく。事務所から雑に扱われていたり、待遇が悪かったり、不幸な偶然が重なったりする状況をさして、メンバーの田村芽実が発した名言「スマイレージはいつもこうだ」がグループの象徴となる。
そういう逆境をバネにして、２０１４年には全国４７都道府県をまわる苛酷なライブハウスツアーを敢行。７月にはまさかの日本武道館公演を実現したが、先輩後輩含めハロプロ全グループがゲスト出演するフェス状態に。客席がいちばん湧いたのはモーニング娘。＇１４登場のときという屈辱で、まさに「スマイレージはいつもこうだ」を地で行く一夜だった。
そして、この年１０月には、ハロプロ研修生から室田瑞希、佐々木莉佳子など３期メン
バー３人が加入し、９人体制に移行。年末には、新しいグループ名「アンジュルム」が発表される。メンバーの中西香菜が考案したというこの名前は、フランス語のａｎｇｅ（天使）とｌａｒｍｅ（涙）をくっつけた（かなり無理やり感のある）造語。
スマイレージの名前に別れを告げるとともに、つんく♂プロデュースからも離れ、２０１５年２月、アンジュルムとしての最初のシングルをリリース。不安な船出だったが、このシングルに収録された中島卓偉作詞作曲のロックなナンバー『大器晩成』がハロヲタ全体の熱い支持を集め、イメージの一新に成功。スマイレージ時代のかわいい路線と決別し、アンジュルムはここから一気にかっこいい系に舵を切った。
