Sim, isso é chato mesmo essa situação. Honestamente, tu só precisa ser direto mas honesto - não inventa uma desculpa furada porque ele vai sentir e fica ainda mais awkward no trabalho depois. Só fala pra ele que tu tem um conflito de agenda ou que não consegue se liberar em setembro, pronto. Tu pode adicionar algo legal tipo "eu teria gostado de estar lá mas não é possível" pra ele não achar que é algo pessoal. A maioria das pessoas entende que nem todo mundo consegue ir, mesmo com um convite. É normal, a gente recebe convites de colegas que a gente não consegue/quer honrar, zero drama.
O que importa é tu fazer isso cedo, não tipo duas semanas antes. Manda uma mensagem pra ele rápido ou conversa com ele na hora no trabalho, fala direto, e pronto - tu continua de boa com ele no trabalho. Não pode ficar arrastando isso ou se sentindo culpado, não é nada grave mesmo. O cara vai ter um monte de outros convidados, não vai ficar ruminando sua resposta. Galera cancela casamento o tempo todo por todo tipo de razão. Só sé respeitoso falando rápido pra ele, e aí a gente segue.