Não caia na armadilha de pensar que é puro marketing, mas também não assuma que um café caro é automaticamente melhor só porque o servem em um lugar bonito. O que é real mesmo é que o café de especialidade tem um processo completamente diferente desde a plantação até sua xícara, e isso tem um custo real. Os cafés normais costumam ser misturas de grãos de diferentes origens, às vezes de menor qualidade, torrados em grandes lotes e armazenados durante meses. O de especialidade vem de fazendas identificadas, é colhido no momento exato de maturação, e é torrado em pequenos lotes pensando em destacar as características específicas daquele grão.
Agora, a questão honesta é que nem todos os cafés de especialidade valem o triplo do preço, e você também não precisa gastar essa grana para sentir a diferença. O que você vai notar se provar um decente é que o sabor é mais limpo, menos amargo, com notas mais complexas. Às vezes certos lugares te cobram extra pelo ambiente hipster que você mencionou, mas a maioria das cafeterias de especialidade que conheço aposta pesado na qualidade do grão e no método de preparação porque sabem que é isso que vai te trazer de volta.
Meu conselho: prove um em um lugar que pareça sério com relação ao café, não naquele que o local se vê mais bonito. Pergunte de onde vem o grão e quando o torram. Se é recente (menos de duas semanas) e o barista te explica algo sem parecer um vendedor, provavelmente você não está jogando dinheiro fora. Na primeira vez talvez você não note muita diferença porque seu paladar não está treinado ainda, mas depois de algumas tentativas você vai sentir.