Woman looking at screen

Evaluating Models and Tools for Fairness

December 2020

Data is essential to the rapid digitization of the underwriting process but as with any system designed to optimize efficiency, AI programs can leave behind people who are “difficult to assess” in a model based paradigm. Consumer groups have noted that the use of data tools for automated decision-making in the underwriting process can inherit prejudice of prior decision makers or reflect biases that persist in society at large. In the absence of a formal guidance, what language and tools can life insurers use to have a productive discussion about bias and fairness in models to support risk assessment?

Hareem Naveed, Director, Integrated Analytics, and Amy Atkinson, Deputy General Counsel and Chief Compliance Officer, present a technical framework for bias mitigation in model based underwriting with illustrated examples from the life insurance industry. 

This is the third in Munich Re’s new five-part North American series exploring innovations in underwriting and data science.

Highlights

  • Leveraging third-party data: From our extensive experience working with carriers on designing and monitoring AUW programs, we present a compilation of third-party data used as inputs to model-based risk assessment frameworks and the questions that need to be applied in order to examine for fairness. 
  • Auditing model bias: All model audit approaches specify metrics that can be used to determine if models are fair or biased. In addition to a model performance metric, how can insurers incorporate a fairness metric in the model selection process? We define a flexible and model-agnostic framework that can be used to evaluate third-party scoring tools or internally developed models.
  • Following regulatory guidance: The National Association of Insurance Commissioners (NAIC) recently adopted Artificial Intelligence Guiding Principles. We explore how legal counsel can be incorporated into the modeling process to ensure close adherence to regulatory guidelines.

Watch a recording of the webinar and download the executive summary for more information.

Munich Re

Rechtlicher Hinweis

Die gewünschte Information bezieht sich auf Finanzinstrumente, Wertpapiere oder diesbezügliche Angebote, die nicht in oder in die Vereinigten Staaten, Kanada, Australien oder Japan und von US-Bürgern (gemäß der Definition in der Regulation S des US Securities Act 1933) angeboten werden, noch in und von diesen Ländern bzw. US-Bürgern akzeptiert werden dürfen. Folglich wurden diese Finanzinstrumente oder Wertpapiere sowie diesbezügliche Angebote (i) weder nach dem Amerikanischen Wertpapiergesetz noch nach einem Gesetz eines US-Bundesstaates registriert; (ii) diese Finanzinstrumente oder Wertpapiere dürfen nicht direkt oder indirekt in oder in die Vereinigten Staaten angeboten, verkauft, wiederverkauft, verpfändet oder geliefert werden, es sei denn, es liegt eine Befreiung von den Registrierungsanforderungen des Amerikanischen Wertpapiergesetzes vor; und (iii) solche Finanzinstrumente oder Wertpapiere können dem US-Steuerrecht unterliegen. Keine der hierin enthaltenen Unterlagen begründet ein Verkaufsangebot oder eine Aufforderung eines Angebots zum Kauf von Finanzinstrumenten oder Wertpapieren in den Vereinigten Staaten, Kanada, Australien oder Japan bzw. an US-Bürger oder in eine andere Rechtsordnung, in der ein solches Angebot oder dessen Einholung rechtswidrig ist. Personen, die ein Angebot annehmen möchten, dürfen weder die Post der Vereinigten Staaten, Kanadas, Australiens oder Japans oder irgendein Mittel oder Instrument (wie z.B. Faxübertragung, Telex oder Telefon) des Zwischenstaatlichen- oder Außenhandels, noch irgendwelche Einrichtungen einer inländischen Wertpapierbörse der Vereinigten Staaten, Kanadas, Australiens oder Japans für irgendeinen Zweck benutzen, der direkt oder indirekt mit der Annahme eines Angebots zusammenhängt. Annahmen oder andere sich auf ein Angebot beziehende Unterlagen dürfen nicht postalisch in den Vereinigten Staaten, Kanada, Australien oder Japan frankiert oder abgestempelt werden. Alle Personen, die ein Angebot annehmen möchten, müssen eine Adresse außerhalb der USA, Kanada, Japan und Australien für den Erhalt jeglicher Finanzinstrumente oder Wertpapiere angeben. Darüber hinaus wird von jedem Inhaber der relevanten Finanzinstrumente oder Wertpapieren angenommen, dem Emittenten dargelegt zu haben, dass (i) er kein US-Bürger ist und (ii) dass er diese Finanzinstrumente oder Wertpapiere nicht auf Rechnung eines US-Bürgers erwirbt.

Weder die in diesen Seiten enthaltenen Informationen, noch irgendeine Meinungsäußerung begründen ein Angebot oder eine Aufforderung, Finanzinstrumente oder Wertpapiere in irgendeiner Rechtsordnung zu erwerben. Jegliches Angebot oder jegliche Aufforderung wird nur in Unterlagen gemacht, die dafür rechtzeitig veröffentlicht werden; und jegliches Angebot und jegliche Aufforderung ist beschränkt auf die in diesen Unterlagen bereitgestellten Informationen.

Please scroll and read to the very bottom, before you can confirm.