Sim, com o cancelamento do seu cadastro, o benefício será cancelado automaticamente.
O aplicativo do Cadastro Único está disponível nas lojas Apple e Play Store, e também pelo link https://cadunico.cidadania.gov.br.