这一页讲的是奥克兰大学的 COMPSCI 712 课程,标题为 AI Agency, Ethics, and Society,具体内容是第十一讲,主题为 Discrimination and Bias(Part 1)。这一讲主要探讨人工智能系统中的歧视与偏见问题,包括这些问题如何产生、对社会的影响以及如何通过技术和伦理手段进行缓解。偏见(bias)在 AI 中可能来源于数据集的不平衡或算法设计中的隐性假设,而歧视(discrimination)则是偏见在实际应用中的表现形式,例如决策系统对某些群体的不公平对待。理解这些问题对于设计公平、透明的 AI 系统至关重要。
第 2 / 34 页
这一页讲的是 ChatGPT 使用政策及案例报告。主要内容包括 AI 工具的学习支持限制,以及医学案例分析的说明。
这一页讲的是 ChatGPT 使用政策及其在学术环境中的限制。首先,幻灯片强调学生可以使用生成式 AI 工具(Generative AI tools)来辅助学习,但这些工具不能用于所有评估活动中,以确保学术诚信。页面提供了相关政策的链接,方便学生进一步了解具体规定。其次,右侧展示了一篇医学案例报告,讨论了对一名四个月大女性患者的医源性门静脉和肝动脉损伤的成功管理。这篇文章的总结部分强调了处理医源性血管损伤的关键在于准确评估损伤阶段,并快速识别问题。治疗应由经验丰富的外科医生在专业医疗中心进行,以确保复杂病例得到适当处理。这一案例报告展示了 AI 工具在提供一般信息方面的作用,但也指出其无法替代专业医疗建议。通过这一页,可以看出生成式 AI工具的潜力和局限性,以及专业知识的重要性。
这一页讲的是算法公平性中的偏差问题。首先提到 Cathy O’Neil 和她关于“武器化数学模型”(Weapons of Math Destruction, WMDs)的观点,她强调算法可能因设计或数据问题导致社会不公平。其次,探讨了算法偏差(Bias in context of algorithmic fairness),即算法在处理数据时可能存在的系统性偏见,这会影响公平性和决策质量。最后列举了三个案例研究:1. 基于名字预测性别(Predicting Gender based on name),讨论算法如何通过名字推测性别,但可能因文化或数据偏差导致错误;2. COMPAS,一个用于预测犯罪风险的算法,被批评因种族偏见而不公平;3. 预测犯罪性(Predicting Criminality),涉及算法通过面部特征或其他数据预测犯罪倾向,这种做法引发伦理争议。这些案例展示了算法偏差可能带来的社会影响,提醒我们在设计和应用算法时需谨慎对待公平性问题。
第 4 / 34 页
这一页讲的是技术系统可能带来的几种伤害类型,包括排斥性实践、误导、偏见和缺乏有效同意等问题。
这一页讲的是技术系统可能对社会和个人造成的伤害类型。首先提到的是排斥性实践(Exclusionary practices),它指的是技术可能会导致少数群体被排除在外或体验到排斥感。其次是误导(Misrepresentation),即系统可能会错误地识别或描述个人信息,造成身份上的误解。第三是自主权的削弱(Diminishment of autonomy),这意味着技术可能剥夺个人对自身决策的控制权。接着是模型中的歧视性偏见(Discriminatory bias),即算法或模型可能会对某些群体产生系统性偏见,导致不公平的结果。最后是缺乏有效同意(Lack of meaningful consent),指的是用户在参与这些技术系统时可能无法充分理解或真实同意其使用方式。举例来说,如果一个算法在招聘过程中对某些群体有隐性偏见,这可能会导致他们的就业机会减少,体现了歧视性偏见的伤害。
这一页讲的是 Cathy O'Neil 在 2017 年伦敦 RSA 的演讲,主题是算法的真相(The Truth About Algorithms)。她探讨了算法在现代社会中的广泛应用及其潜在问题。幻灯片中间的插图形象地展示了算法的权衡:一边是堆积如山的数据,另一边是天平,暗示算法在处理数据时可能存在偏见或不平衡。这一演讲强调算法并非中立,可能会放大社会不平等或偏见。例如,在招聘或贷款审批中,算法可能基于历史数据做出决策,但这些数据可能本身就包含偏见,因此算法的结果可能会进一步加剧这种偏见。理解这一点对于设计公平且透明的算法至关重要。这页幻灯片通过视频链接引导听众了解更多细节,进一步探讨算法的社会影响及其道德责任。
第 6 / 34 页
这一页讲的是算法设计中的决策问题,包括定义成功、选择代理指标和数据适用性的重要性。
这一页讲的是算法设计和实施过程中涉及的关键决策问题。首先,算法的设计需要明确成功的定义(Definition of Success),例如在教育领域中,如何评估教师的表现。其次,选择适当的代理指标(Acceptable Proxies)是关键,比如学生成绩的提升是否可以作为衡量学生表现的有效标准。最后,数据的适用性(Is the Data Appropriate)也需要被审视,包括历史偏见(Historical Bias)、隐私问题(Privacy Issues)以及数据是否准确(Inaccurate Data)。这些问题直接影响算法的公平性和有效性,设计者需要在每一步都进行深思熟虑,以避免潜在的负面影响,例如偏见或误导性结果。
这一页讲的是数据科学的决策如何与社会政治活动相关联。数据科学家在选择研究问题、使用数据以及提出解决方案的过程中,实际上是在做规范性立场的选择。这些选择会直接影响社会中权力、地位和权利的分配,因此具有政治意义。作者 Ben Green 在其著作《Data Science as Political Action: Grounding Data Science in a Politics of Justice》中强调,数据科学并非中立的技术活动,而是深刻嵌入社会结构和价值观的政治行为。举例来说,选择分析某一地区的犯罪数据可能会导致资源向某些社区倾斜,而忽略其他地区的需求。这提醒我们,数据科学家需要意识到自己的决策可能带来的社会影响,并承担相应的责任。
这一页讲的是 Cathy O'Neil 在《Weapons of Math Destruction》一书中提出的“数学毁灭性武器”概念,分析了算法模型可能带来的负面影响。首先,不透明性(Opacity)指的是模型是否对被影响者隐藏其运作机制或目的,甚至完全不可见,这会导致用户无法理解或质疑模型。其次,伤害性(Damage)关注模型是否损害了个人利益,例如是否体现出不公平,或者直接对生活造成破坏。最后,规模性(Scale)强调模型是否具备快速扩展的能力,可能导致负面影响呈指数级增长。举例来说,一个招聘算法如果不透明且带有偏见,可能会不公平地筛选掉某些候选人,而其规模化应用会扩大这种不公平。这些特性提醒我们在设计和应用算法时,必须关注其潜在的社会影响。
这一页讲的是模型的局限性。首先,数据不平衡(data imbalance)的问题显著,模型中Anglo-Saxon起源的名字数量远多于Māori起源的名字,大约是10比1。这可能导致模型对某些群体的预测更准确,而对其他群体表现较差。其次,模型仅识别男性和女性性别(male and female genders),排除了非二元性别(non-binary),这限制了模型的适用范围。最后,模型未包含来自广泛族群的名字数据(wide range of ethnic groups),这进一步降低了其准确性。例如,如果模型主要基于某一文化背景的数据训练,那么对其他文化背景的名字预测可能会失准。这些问题提醒我们,数据的多样性和全面性对模型的公平性和准确性至关重要。
这一页讲的是犯罪与非犯罪人脸样本的对比,重点是通过样本图片展示数据集的构成。图中分为两部分:(a) 是犯罪者身份证照片样本集 Sc 的三张图片,(b) 是非犯罪者身份证照片样本集 Sn 的三张图片。这些照片是研究中用于分析人脸特征与犯罪行为之间可能关系的数据来源。通过这种分类,可以为后续的机器学习模型训练提供基础数据。研究的目标可能是探索是否存在特定的面部特征与犯罪行为的关联性,但需要注意伦理问题和模型偏差的风险。例如,数据的选择是否公平,模型是否会产生刻板印象等。这一页的图像为理解数据集的构成提供了直观的参考。
第 33 / 34 页
这一页讲的是关于“犯罪类型”的错误假设,包括外貌与犯罪倾向的关系,以及法律系统的判断可靠性。
这一页讲的是关于“犯罪类型”的三个常见错误假设:第一,认为一个人的面部特征完全由其先天属性决定;第二,认为“犯罪倾向”(criminality)是某一群体的内在特性;第三,认为法律系统能够可靠地判断犯罪倾向,并且这一判断不会受到面部外貌的影响。这些假设可能导致偏见和误判,因为它们忽略了犯罪行为的复杂性以及社会和环境因素的影响。例如,认为某些面部特征代表犯罪倾向可能引发歧视性算法或偏见性决策。这一页引用了“Physiognomy’s New Clothes”一文,进一步探讨了这些错误假设的影响及其背后的科学问题。这些内容提醒我们在研究和实践中应避免将外貌与行为属性简单关联。
第 34 / 34 页
这一页讲的是奥克兰大学的视觉展示。
这一页讲的是奥克兰大学(University of Auckland)的视觉展示,结合了城市景观和毛利文化元素,突出其地理位置和文化特色。背景中可以看到奥克兰市的天际线,包括标志性的天空塔,象征着现代化和城市发展。而右侧的毛利雕刻图案则体现了新西兰的传统文化和民族特色。这种设计融合了自然、文化和城市元素,展现了奥克兰大学作为新西兰顶尖学府的独特定位。这一视觉设计不仅传递了学校的学术实力,还强调了其与当地文化和环境的紧密联系,是吸引国际学生的重要形象展示。