A verdade é mais simples: não compensa trocar de app se ninguém que você fala tá lá. O Telegram realmente tem funcionalidades legais e a privacidade é melhor, mas um app de mensagem só presta se seus contatos usam também - do contrário você fica conversando sozinho.
O que muita gente faz é usar os dois. Manda mensagens rápidas pelo WhatsApp com a turma e aproveita o Telegram pra grupos de interesse, comunidades, coisas assim. Funciona bem se você tá disposto a gerenciar dois apps, mas se é só pela privacidade e tal, fica a cargo de você decidir se o ganho vale a inconveniência de ninguém te responder lá.