Sí, es molesto esta situación. Honestamente, solo tienes que ser directo pero honesto - no inventes una excusa que no se aguanta porque la va a sentir y puede ser aún más awkward en el laburo después. Simplemente dile que tienes un conflicto de agenda o que no te puedes liberar en septiembre, listo. Puedes agregar algo amable como "me hubiera gustado estar ahí pero no es posible" para que no piense que es algo personal. La mayoría de la gente entiende que no todos pueden ir, incluso con invitación. Es normal, recibimos invitaciones de colegas que no podemos/queremos honrar, cero drama.
Lo importante es que lo hagas temprano, no tipo dos semanas antes. Contactalo rápido por mensaje o en persona en el laburo, dile directo, y listo - seguís siendo copado con él en el laburo. No tenés que arrastrarlo o sentirte culpable, realmente no es grave. El tipo va a tener un montón de otros invitados, no va a rumiar tu respuesta. Gente que cancela casamientos todo el tiempo por un montón de razones. Solo sé respetuoso diciéndole rápido, y pasamos a otra cosa.