Tirar da exchange é realmente a jogada mais segura para holding de longo prazo, mesmo que Coinbase seja bem reputada. A coisa é: você não é dona da cripto que tá na exchange - a exchange é dona e você tem um IOU. Se algo der errado com a segurança deles, levarem um hack, ou tiverem problemas legais/financeiros, seus fundos podem estar em risco. Tem também a questão regulatória onde contas congeladas acontecem. Uma hardware wallet te coloca no controle, que é o ponto todo da cripto.
A preocupação com seed phrase é real mas dá pra gerenciar. Escreve em papel, armazena em algum lugar seguro (cofre de banco, cofre em casa, qualquer coisa), e não tira foto nem coloca online. Isso honestamente é a parte mais difícil. A transferência em si é bem simples - gera um endereço de recebimento na tua wallet, manda tua cripto pra lá do Coinbase. Leva uns 10-20 minutos e uma taxa de transação. Se tiver nervoso, faz uma transferência pequena primeiro pra ter certeza que entendeu o processo antes de mexer com tudo.
Para holding de longo prazo você provavelmente tá olhando anos sem mexer nisso, o que significa que uma exchange sendo comprometida é um risco real pra lidar. Hardware wallets também não são perfeitas (você pode perder o aparelho, esquecer a seed phrase), mas pelo menos o risco cai nas suas costas, não de uma empresa. É mais tranquilidade do que qualquer coisa, mas com o tempo essa tranquilidade importa.