Mehr als 40 Jahre engagierte sich Wittwer ehrenamtlich im Börsenverein. Von 1974 an wirkte er für drei Jahre im Vorstand des Börsenvereins mit, von 1991 bis 1998 war Wittwer Vorsitzender der Abgeordnetenversammlung. Die 1867 gegründete Konrad Wittwer Verlags- und Sortimentsbuchhandlung mit ihren mittlerweile mehr als einem Dutzend Filialen wird seit 1998 von Wittwers Söhnen Konrad Martin und Christian weitergeführt.