Pessoalmente, sempre faço um orçamento rápido com uma seguradora externa antes de aceitar a da companhia aérea. Em 90% dos casos economizo bastante e a cobertura é mais completa, principalmente para coisas como bagagem extraviada, cancelamento por motivos pessoais ou assistência médica. As companhias aéreas sabem muito bem que as pessoas compram no momento do check-out sem pensar, então os preços são inflacionados.
Um detalhe que muitos subestimam: leia bem o que a seguradora da companhia exclui. Muitas cobrem o atraso só se for culpa delas, não de terceiros. E depois tem a questão das pré-existentes - se você tem uma condição médica conhecida, às vezes não está coberto. Com seguradoras externas você encontra condições muitas vezes mais favoráveis se ler bem as cláusulas. Para um São Paulo-Rio o risco é realmente baixo, mas se depois você precisa fazer uma conexão ou tem uma situação particular, pode valer a pena ter proteção de verdade.
Verifique se o seu cartão de crédito já cobre cancelamentos, e nesse caso realmente pode pular essa coisa. Se não tem nada, dê uma olhada em Ucover, Hype ou similares - gastar 10-15 reais com uma apólice decente é diferente de pagar 40-50 à companhia pelo mesmo serviço idêntico.