Что бы сейчас порешать проблему мне видятся такие варианты:
1. Бинарный пакет можно собрать на gcc 3.x
2. Бинарный пакет можно собрать с неполной оптимизацией, отключив именно ту опцию которая приводит к падению компилятора.
3. А в srpm наверное можно переопределить переменную $RPM_OPT_FLAGS тогда будет всё ок.
По поводу п.3 точно не знаю, никогда не делал.