Nama grup ini diambil dari lokasi kantor label rekaman SME yang berada di Nogizaka. Di tempat itu pula dilangsungkan audisi tahap akhir. Angka 46 dibelakang Nogizaka diberikan oleh Akimoto dengan maksud "memberi semangat agar tidak kalah dari AKB48 meskipun jumlah anggota hanya sedikit.