Familiar - tive que lidar com uma situação parecida. Uma pessoa me adicionava constantemente em chats, e quando eu saía, ela se magoava ou me pegava em alguma injustiça. O mais interessante: depois descobri que ela fazia isso com muita gente, e a maioria saiu silenciosamente ou simplesmente ficava em silêncio nesses chats, sem falar nada. Ou seja, é um hábito dele, não seu problema 😐
O principal - a palavra "esnobe" aqui funciona como uma corda com uma armadilha. O amigo pressiona sua consciência para que você fique e confirme que é uma boa pessoa. Mas uma pessoa normal, ao ouvir "eu não me sinto confortável", simplesmente aceitaria. Não tentaria provar que você está errado. Se ele acha normal chamar seus limites pessoais de esnobismo - isso é como ele te trata, não um reflexo da realidade.
Na prática: mande uma mensagem curta para ele uma única vez. Não se justifique, não argumente. "Sou grato pelas tentativas de me envolver, mas chats em grupo com desconhecidos não funcionam para mim. Vou sair deles". E pronto. Se ele começar a te pegar nas emoções ou acusar novamente - simplesmente não responda isso. Você não precisa convencê-lo de que não é esnobe. Os caras nas outras respostas estão certos: é manipulação, e só funciona se você jogar o jogo "prove que é uma boa pessoa". Não jogue.