扬声器
|
成绩单
|
| JMP Anne Milley |
这本书非常好,非常重要。 不能高度推荐。 因此,卡洛琳·克里亚多·佩雷斯(Caroline Criado Perez)是最畅销,屡获殊荣的作家,女权主义者和激进主义者。 |
| |
她的著作《看不见的女人》已被翻译成24种语言,并获得了无数奖项。 卡罗琳本人曾获得多个奖项。 今年早些时候,她在2015年女王生日奖中被指定或命名为OBE。 |
| |
今年早些时候,她因促进社会平等而获得芬兰手奖。 今天很高兴她能和我们在一起。 请欢迎Caroline Criado Perez。 |
| 卡罗琳·克里斯多·佩雷斯 |
嗨,安妮 非常感谢您的精彩介绍。 |
| |
我简直不敢相信 |
| |
颁奖是在今年,感觉就像是在很久以前,但是,是的,实际上是三月,就在我们都陷入锁定之前。 因此,我希望你们都忙于投票,因为我真的非常希望看到您将如何投票。 |
| |
理想情况下,在我开始讲太多之前,我先告诉您一下。 我要说的是什么。 我将尽力尽快地进行交谈。 |
| |
而且,因为我想讲的内容很多,显然我们想留出时间提问。 因此,我要谈的是一种偏见,这种偏见会影响到我们以及您以及我们所有人。我将向您展示这种偏见如何影响我们的数据收集和分析, |
| |
这严重影响了我们分配资源和设计几乎所有事物的方式。 |
| |
因此,在我开始之前,让我们看看第一次民意测验的结果,对此我感到非常兴奋。 您是否了解数据性别差距? |
| |
这是非常好的。 65%的人知道数据性别差距,35%的人不知道。 |
| |
因此,您将在此结束时全部意识到。 设计团队中的女性? 哇,非常高,非常好。 您的设计团队性别平衡吗? |
| |
不太好。 好吧,我将为您的设计团队为什么要保持性别平衡提供一个非常有力的理由。 因此,我将不做任何其他事情来共享我的屏幕,让我们开始吧。 |
| |
所以我希望大家都能看到。 所以首先,当我谈论性别数据鸿沟时,我是在谈论性别……对不起,数据。 |
| |
让我们定义我们的术语。 那么我说数据时是什么意思? |
| |
我们倾向于将数据构造为具有自己的继承属性的有形物质,而不管我们如何与之互动。 我们认为数据以某种方式坐在完全形成的以太那里,等待我们提取数据, |
| |
那是可以理解的,对吗? 人们相信数据是因为数字对我们而言是真实的。 他们感到客观,他们感到中立。 他们不是那种凌乱的意见。 |
| |
但是实际上,数据比这要复杂得多,因为除了我们之外,数据实际上并不存在,而不是被暂停 |
| |
动画。数据不是离散的实体,它本质上是主观的人类,这意味着我们不能简单地将数据视为客观中立的事实,而我们可以以此为基础来建立客观中立 |
| |
决定。 像创建数据的人一样,数据也很滑溜,并且在处理数据时,我们必须考虑很多因素。 诸如谁完成了数据收集以及他们如何完成数据之类的问题? |
| |
他们从谁那里收集数据? |
| |
人们问了什么问题来得出这些中立的数据? 甚至在此之前,我们甚至选择收集哪些数据? 对? 什么是 |
| |
甚至是我们认为非常重要,必须解决的问题,也导致我们首先收集了这些数据? 这些都不是 |
| |
是客观的决定,它们都会对最终归我们所有的数据以及这些数据告诉我们的故事产生影响。 因此,仅举一个例子 |
| |
长期以来,低收入国家的劳动力参与率统计在统计女性劳动力参与方面一直是不可靠的。 |
| |
并且因为他们有低估他们的历史。 究其原因,是因为问题围绕框架而被提出和提出。 |
| |
人们倾向于在西方工作的方式。 因此,这是有薪工作,往往会使他们在一天中的大部分时间里都离开家。 |
| |
但是,低收入国家的妇女通常不会那样工作。 他们的工作通常是在家中无偿工作,其中包括无偿护理工作,但也可能包括农业工作,此类自给农业。 |
| |
当然,他们从事的工作是在西方,我们已外包给公用事业公司。 所以出去拿柴火和水。 |
| |
但是问题并非旨在抓住这种工作方式,这意味着女性通常被认为在经济上不活跃。 |
| |
当然,情况远非如此。 因此,这显然不仅影响女性劳动力参与率。 例如,它最终还会影响GDP。 |
| |
让我向您展示另一个示例,说明如何通过不良的收集方法破坏数据。 |
| |
因此,这张左侧的图表是运输计划人员传统上收集数据的方式。 因此,您可以看到,所有带薪就业数据都汇总在一起。 |
| |
但是他们还没有汇总出于护理工作目的而完成的旅行。 实际上,它被细分为很多……在很多单独的类别中,例如购物,陪同访问。 你知道吗,所以杂货店购物与 |
| |
例如购物,对不起杂货店和SHOE SHOPPING(我头脑里显然有食物)和 |
| |
正如您所看到的那样,就业似乎是人们出差的最大原因。 看左边的表格,设计当然很有意义 |
| |
围绕有薪工作旅行的公共交通工具。 但是,如果您看一下右边的表格,那会告诉我们一些不同的东西。 右边的桌子是由一个城市 |
| |
马德里的规划师,收集了与护理有关的旅行数据,并将其汇总在一起,就像我们对有偿就业数据和传统旅行数据进行汇总一样。 |
| |
她发现,以照顾为目的的旅行次数几乎等于以就业为目的的旅行次数。 |
| |
这是一个性别问题,为什么? 嗯,基本上是因为世界上绝大多数无偿护理工作仍由妇女完成。 |
| |
因此,在全球范围内,女性的无偿护理工作量是男性的三倍。 根据国际货币基金组织,这可以进一步细分为两倍的儿童保育和四倍的家务劳动。 |
| |
这会影响妇女的出行方式。 因此,当马德里的城市规划师Sanchez-???按性别进一步细化并分解数据时,她发现这种护理是女性出行的最大目的。 |
| |
现在,设计公共交通工具来支持妇女的无偿照料工作不仅仅是正义的问题。 这实际上是一个经济决定。 |
| |
因此,长期以来,世界各地的国家都迫切希望让更多的妇女重新上班,为什么您需要准确的女性劳动力参与率数据, |
| |
更多的工作人员等于更多的税收等于更高的GDP,更高的生产率。 |
| |
但实际上也非常有趣的是,发现增加工作中的女性人数比增加工作中的男性人数增加了GDP。 |
| |
他们不知道为什么会这样,但是我的意思是,这可能与下降有关 |
| |
回报率。 但是,尽管如此,情况确实如此。 有一个非常非常明确的经济理由可以增加 |
| |
妇女在工作。 而且,如果您要这样做,则需要创建一个结构,以支持无偿工作,这当然会使我们倒退 |
| |
在这种大流行期间,但我会再讲一点,假设我的讲话时间不多,用完了。 无论如何, |
| |
关于这两个示例,您可能已经注意到,数据总是偏向有害 |
| |
女性,因此女性被低估了,这不是巧合。 实际上,您关注的世界上大多数数据集都会遇到女性人数偏低的问题。 |
| |
这仅仅是因为我们在全球范围内收集并继续收集的绝大多数信息,从经济数据到城市规划数据再到医疗数据的所有信息都已经收集到了男性。 |
| |
这就是男性的身体,也是典型的男性生活方式,例如男人的工作方式,男人的出行方式。 |
| |
这意味着世界上几乎所有事物,从您可能暂时不在办公室里工作,直到几个月前您都习惯了, |
| |
以及您可能曾经使用过的公共交通工具或私人交通工具,您手中的手机,该手机上的应用程序以及所收到的医疗服务 |
| |
被设计用于男性工作,因为这就是我们拥有的数据。 |
| |
结果是,世界上大多数事情对女性而言都不是很好。 我认为这是性别数据差异,其中有65%的人曾听说过。 |
| |
因此,希望现在,你们中的100%知道性别数据差距是什么。 |
| |
现在,性别数据鸿沟的第一条规则非常重要。 如果您什么也不想拿,请把它拿走, |
| |
性别数据鸿沟不是阴谋的产物。 这不是故意的。 不是一群讨厌女人的数据科学家憎恨女人并希望我们死去的恶心。 |
| |
这只是偏差的产物,这是我在开始时提到的偏差,但是我们大家都分享,并且 |
| |
本身就是一种可以追溯到几千年前的思维方式的产物。 这种思维方式围绕着我的一个很好的朋友,称为参考人, |
| |
谁是世界上最糟糕的超级英雄。 但是,在向您介绍参考人之前,我想开始第二次调查, |
| |
您应该可以看到,它专门针对制造商和工程师。 因此,您在制造业或工程领域的人,请回答以下问题。 同时,我将向您介绍参考人。 |
| |
开始了。 这是参考人。 如您所见,他是一个70公斤的白人男性,大约25至35岁。 |
| |
正如我所说的,他的超级大国(我可能没有说过,但是现在我要告诉你)是他拥有代表所有人的超级大国。 他不是很擅长此事,因为他只是一种人。 |
| |
无论如何,正如我所说,“参考人”源于将普通男性视为普通人类的悠久历史。 实际上,这种思维方式可以追溯到亚里士多德。 哎呀。 |
| |
好了 这是亚里斯多德。 亚里士多德(Aristotle)被女性所迷惑,并且普遍认为,是的,女性……女性……女性非常令人困惑。 女人是...为什么女人存在? |
| |
我们是男人的一种亚型,畸形是他使用的这个词。 但是,最好的报价是,我想您可以说这真的,很确定了他对参考人的想法 |
| |
在他关于动物繁殖的生物条约中可以找到, |
| |
他在信中写道:“事实上,第一个偏离类型的是后代应该变成雌性而不是雄性。” 因此,您可以很清楚地看到他清楚地表明,男性是女性偏离的类型。 那只是他的标准职位。 |
| |
继续前进,您会发现这种思维方式一直持续到文艺复兴时期,那里爆发了医学插图。 人们真的在文艺复兴时期进入了它。 |
| |
您可以非常清楚地看到她们代表女性的身体 |
| |
他们仍在想女性的身体与男性的身体有所偏离。 所以从字面上看,这是女性的身体,而男性的身体却朝外。 |
| |
那么生殖器官,为什么雌性生殖器官在内部而不是外部? 好吧,他们一定在里面退缩了,对此的解释是 |
| |
这是女性的重要热量。 基本上,女性的身体真的很冷,因此,不良的生殖器官需要藏在体内。 而且因为它们只是男性版本的女性版本,所以您有 |
| |
您可能在这里看到的是阴囊和女性睾丸的图片。 但是我对此感到非常着迷的是,您可以轻松地将其转为正确,然后说这是 |
| |
只是男人偏离了女人,对吧? 男人的生命热量过多,这就是为什么, |
| |
您知道,这些非常敏感的生殖器官在身体外晃来晃去,没有受到保护。 只是,只是我的想法。 |
| |
这种女性思维方式在某种程度上一直持续到20世纪,这就是模块化男人。 |
| |
而人类规模,即人类规模内的“模块化人”,您也许可以看到我正在使用这种人类规模。 |
| |
1920年代,一位有影响力的瑞士建筑师勒·柯布西耶(Le Corbusier)提出了人类的梦想。 |
| |
正如我所说,他提出了关于人类在建筑中的规模的想法。 人类将要进入建筑物。建筑物应围绕人类设计。 |
| |
问题在于,对他而言,这是人类的意思,尤其是六英尺高的英国警察侦探,我当时认为这是一种迷人的特质。 |
| |
实际上有人做过……有证据表明有人对勒·柯布西耶说:“!伴侣,女人存在,也许你想考虑一下 |
| |
包括在您的人类规模中。\!” 所以他做到了。 他确实考虑过女性。 但是最终,女性的身体被否定为比例和谐的源泉, |
| |
你知道,我当然知道我的身体。 现在您可能认为这听起来很愚蠢,但是现在已经很久了,我们当然知道得更多。 我们知道在设计中要包括女性。 好吧,让我们看看 |
| |
我们刚刚进行的民意调查。 看到这将非常非常有趣 |
| |
什么...我看不到投票结果。 好吧,我将继续进行下去,希望民意调查结果会在某个时候弹出。 |
| |
因此,让我们继续找出什么 |
| |
设计产品时,您是否按标准收集无性别汇总数据? |
| |
因此,这似乎并不多。 您是否以女性为标准测试您的产品。 再次,这不是一个压倒性的积极回应。 |
| |
您是否总是将性别视为变量? 所以我不得不说这并不奇怪 |
| |
因为实际上,这是非常普遍的,基于我的研究。 但是,这就是为什么您绝对应该始终将性别作为性别变量,并在产品测试和产品设计中包括女性在内的原因。 所以 |
| |
回到幻灯片。 撞车安全。 这是参考人流派的经典流派。 |
| |
因此,几十年来,唯一使用过的汽车碰撞测试假人是基于50%的男性,也就是说,参考人, |
| |
就好像第50个百分位的男性代表了第50个百分位的人类一样,即使有这样的事情,我也会 |
| |
我会反对。 但是结果是,汽车的设计对普通女性而言并不安全。 因此从未设计过安全带, |
| |
从未用乳房组织进行过测试。 我们还没有设计出一种安全带,可以安全地保护女性在怀孕期间使用,尤其是在孕晚期。 |
| |
其结果是,人们经常发现女性不正确地系好安全带,这主要是因为您知道安全带已经割入了她们的脖子,或者使她们无法舒适地躺在乳房上。 |
| |
这意味着他们倾向于不安全地佩戴它们,基本上,如果您佩戴不正确,则说明您没有得到应有的保护。 因此,这是一个巨大的安全问题。 |
| |
还有座位过紧的问题。 现在这不是安慰的问题,这实际上是 |
| |
关于座椅设计要吸收的身体。 因此,很明显,第50个百分位的男性的身体比普通女性的身体更大,更重, |
| |
因此,由于座椅的设计旨在吸收身体的重量,因此在发生撞车事故时,女性会进一步向前倾。 |
| |
而且很显然,这使她们处于较高的危险中,鉴于妇女已经倾向于坐在更远的地方,情况更糟。 |
| |
为了能够到达踏板和到达方向盘,这是驾驶中非常重要的部分。 但这使他们在正面碰撞中处于更高的风险中。 |
| |
当您将它添加到更远的地方时,您可能会发现安全带可能未正确佩戴,并且头枕出现了问题(我现在不打算讨论,但是如果您有一些有趣的事情,研究一下 |
| |
尝试引入更好的头枕,以及如何使头枕变得更好,对女人更糟,这再次是因为没有这种普通的女性撞车测试假人), |
| |
实际上,所有这些的结果是,如果一名妇女在车祸中遭受重伤,那么与同一起车祸中的男子相比,她受重伤的可能性要高47%,而死亡的可能性要高17%。 |
| |
现在,有一些好消息。 抱歉,我只是环顾四周,看看是否能找到灯,我才意识到我这里有点黑 |
| |
这可能对所有人都不利。 所以,是的。 好消息是2015年欧盟(很抱歉,我只是想了解一下) |
| |
后来才意识到,女人确实存在并且 |
| |
介绍他们所谓的女性汽车碰撞测试假人。 |
| |
它实际上是一个非常非常缩小的男性假人。 当然,问题在于女性不只是缩小了男性的比例,对。 还有各种其他差异,包括上述乳房组织。 |
| |
但是,您也知道,骨盆的差异,脊柱柔韧性的差异,体重的差异……对不起……肌肉的质量分布,所以男人会更多地在脖子和自己的肩膀上 |
| |
肩膀,即上半身,这显然在生物力学和汽车安全方面有所作为。 还有这个车祸测试假人 |
| |
我还要提一下,它的尺寸非常小,只有大约12岁 |
| |
孩子,因此非常不代表普通女性。 无论如何,仅在五种法规测试中的一种中使用它 |
| |
而且只能在乘客座位上 因此,基本上在欧盟,身材矮小的男人可以坐在乘客座位上,感到相当安全。 |
| |
我只是想让您注意我前几天遇到的一个有趣的转折。 |
| |
因此,这是一项研究,该研究针对的是自动驾驶汽车驾驶或驾驶者的最佳舒适座椅……睡觉位置。 |
| |
如您所见,他们只是出于同质性而使用男性受试者。 因此,即使在这里,谈到睡眠舒适性,我们也只坚持男人, |
| |
而且我想,你知道,我想,女性的安全可以等待。 我猜那就是那个,那就是那个位置。 我们将从此继续前进,因为这有点令人沮丧,现在是个人防护设备, |
| |
我敢肯定,我们今年听到的声音比我们预期的要多得多。 |
| |
因此,在PPE和PPE供应链真正成为头条新闻之前, |
| |
对于在需要个人防护装备的行业工作的女性来说,这已经是一个非常严重的问题。 |
| |
而且,事实上,在英国的一项研究发现,有71%的女性从事需要个人防护设备的职业, |
| |
PPE尚未设计成适合其身体的位置,其影响可能很严重。 因此,实际上,同一份报告发现,紧急服务对此更糟,只有5% |
| |
的女性表示,个人防护装备从未妨碍过他们的工作。 其中包括防弹衣和防刺背心。 我确定您不需要我告诉您,如果您的 |
| |
防刺背心不合适,无法保护您。 因此,基本上,这两种选择是女性在说她们要么太大 |
| |
(因此,您应该将所有这些多余的材料放在这里)或额外的防刺背心,因为显然很硬。 这不是折叠 |
| |
这意味着它并没有紧贴在肩上。 一位女士谈到可以被她的防刺背心接住,但更重要的是, |
| |
您的动脉暴露在外,这意味着它不能用作防刺背心。 |
| |
另一方面,另一件事是,他们可能会得到一个……抱歉……他们会变大以容纳乳房。 我应该指定的是,他们在设计防刺背心时没有 |
| |
再次容纳乳房组织。 因此,您要使它们变大以适合您的乳房,那么,您就遇到了这个问题。 |
| |
不要容纳您的乳房,然后它们就会变得太小而无法骑行,因为您知道,胸部将其推起,使腹部暴露在外,再次导致防刺背心测试失败。 |
| |
而且,我认为这是一个非常有用的示例 |
| |
认为参考人的这种想法是错误的,认为男性是某种程度上是这个共同体。 我的意思不是。 |
| |
而且,您永远也不会设计出占乳房组织的防刺背心,然后说,这是每个人都可以穿的中性防刺背心。 你知道,那显然是荒谬的,但是以某种方式 |
| |
您知道,由于这种偏见,但是您知道我们都有某种想法,认为男性在某种程度上是不分性别的。 |
| |
但是,这种事情确实凸显了这种不合逻辑的感觉,而且,我的意思是,我个人觉得这很令人着迷,但是我们以某种方式认为,为什么? |
| |
因此,无论如何,正如我在过去几个月中所说的那样,男女通用的个人防护装备使妇女裸露的问题变得更加尖锐。 但是在开始之前,我想先讲最后两个投票问题。 |
| |
好的。 这些仅适用于制药行业的人员。 我非常有兴趣看到结果 |
| |
这次民意调查。 无论如何,所以我现在要谈谈Covid和PPE。 所以基本上,自大流行开始以来... |
| |
所以我有点分心,基本上是因为我妈妈刚刚获得了积极的Covid测试结果。 所以突然之间,我觉得一切对我来说都是非常非常真实的, |
| |
12小时前 但是无论如何,妇女们一直向我发送自己的照片和信息,说她们的个人防护装备不适合她们。 它太大了,女性一直在抱怨 |
| |
擦洗衣服,穿上手套,这都很重要。 您知道可能会擦洗衣服,而长袍可能会导致旅行危险。 |
| |
太大的手套很难进行插管等操作,这显然是非常重要的。 |
| |
Covid护理的重要部分。 但是,女性抱怨的第一件事是他们的口罩,无法在口罩上获得良好的密封,当然,在这种大流行中, |
| |
这是非常重要的,特别是对于将要非常暴露的医护人员。 |
| |
女人们说,他们真的很难找到一种可以通过面部贴合度测试的口罩。 实际上,我也对 |
| |
英格兰和威尔士周围的国家卫生服务基金会(National Health Service Trust),而我重新进行的体格测试的所有结果确实表明,女性更可能无法通过这些测试 |
| |
体格测试,以及当男人失败时,过去和现在都是由于发茬。 这些口罩的另一个很大的设计缺陷是,即使您有 |
| |
您知道,一天的花,您很可能无法通过适合性测试。 |
| |
嗯,但是无论如何。 对于女性来说,这个问题尤为严重,因为它们的设计基本上适合默认的男性面孔。 甚至是较小的那种, |
| |
为了得到密封,工人所做的只是将他们拉得非常紧。 因为问题是,您知道,您想要进入工作并且能够工作,除非通过适合性测试,否则您将无法工作。 所以他们拉面具 |
| |
真的很紧,实际上比他们在现实中可能会戴的要紧,然后这就是您最终得到像这样病毒式传播的照片的原因。 |
| |
实际上,流行病学研究范围相当广泛,表明呼吸器最有可能适合白人男性的脸,而其他人都在后面。 我实际上一直在寻找 |
| |
制造商使用的尺寸规格以及用于确定这些尺寸规格的数据,但是 |
| |
到目前为止,还很不幸。 监管机构没有回复我,制造商已将我送交监管机构,或向我指出仅提及过滤率而不提及尺寸规格的法规。 |
| |
因此,我有点开始认为它们实际上不存在。 但是无论如何,如果有人对此有任何信息,如果您能与我们取得联系,我将不胜感激,因为我很想找出答案, |
| |
你知道吗? 数据必须存在于某处。 实际上,我确实想从CDC那里获得美国的一个数据集。 |
| |
这是一个男性主导的数据集,疾病预防控制中心告诉我,他们没有按性别分开数据。 |
| |
他们只使用了总体数据的平均值,如果这是一个男性主导的数据集,而您没有分别处理男性和女性数据,那么您显然可以看到问题出在哪里。 |
| |
同时,前一天,这项研究发表了,这又是一项非常重要的研究,很高兴他们正在研究此研究,但是为什么 |
| |
他们为什么要对一个男人和一个女人的口罩进行一些比较。 这是不合逻辑的 |
| |
在任何情况下,尤其是在医疗保健方面,因为在全球范围内,医疗保健劳动力主要由女性主导。 |
| |
在全球范围内,女性约占70%,上升到76%,在欧盟和美国则上升到76%。 |
| |
对于护士而言,这个数字更高,大约是您要寻找的国家/地区的85-89%。 当然,护士是贴近身体护理的人。 |
| |
而且,那是在您谈论护老者之类的事情之前,当然在英国,是震中……在许多国家,流行的震中一直在养老院中。 |
| |
并且在英国,护老者在第一波中代表了第一名来自Covid的死亡的职业类别。 |
| |
因此,在医疗个人防护装备方面,如果任何人都应该是默认设置,那应该是女性。 |
| |
我的意思是您不应该使用默认值,而应该使用代表性数据。 但是,如果您要坚持使用默认值,那么在这种情况下使用男人确实没有任何意义。 无论如何,继续前进并 |
| |
让我们看一下...等等,对不起,不是民意调查。 好的。 我们现在来看民意调查。 |
| |
现在,民意测验已经消失了。 好的,我只是要仔细阅读这些医学插图。 因此,在这里,在这里,您可能还记得演讲开始时的医学插图。 这是 |
| |
现代版本。 如您所见,我们有标准的骨盆,标准的生殖器,女性的骨盆,位于她所属的一侧。 |
| |
然后,您在这里有了标准的肌肉系统,肌肉系统,然后是女性肌肉系统。 |
| |
显然,如果没有性别定型观念,我们就不可能有一个老套的人。 这个男人看起来很强壮。 她看起来很性感,对此我很尊重。 我尊重。 无论如何,如果可能的话,我现在想看看民意调查的答复。 |
| |
和 |
| |
那么您所有的试验都包括女性和男性吗? 很高兴看到。 我想你是一群没有代表性的人。 |
| |
虽然我认为这取决于有多少女性。 我应该问这个。 但是,非常顽皮的是,这适用于50/50性别分解您的数据的那些人。 始终按性别分类您的数据。 我现在要尝试说服您。 所以,嗯, |
| |
好吧,我们没有太多时间可以说服您,而只是接受您必须按性别对数据进行分类。 |
| |
因此,参考人在医学界的作用是,我们的医学知识绝大多数是基于男性,因此女性,动物甚至女性细胞 |
| |
从历史上看,通常被排除在临床研究之外。 从历史上看,这主要是遭受更多不良药物困扰的女性的问题 |
| |
对药物和疫苗的反应,更容易被误诊为各种疾病。 |
| |
但是,正如我们在Covid 19大流行中看到的那样,事实证明,这实际上对男人来说也是一个问题。 因此,我们对女性免疫系统的了解远少于对男性免疫系统的了解。 所以现在我们实际上还不太了解其机理 |
| |
为什么女性比男性更能幸存下来呢? 是染色体吗? 是性激素吗? 都是吗 我们只是实际上并不真正知道。 |
| |
而且,缺乏知识严重阻碍了我们开发有效治疗方法。 我很感兴趣看到这个 |
| |
大流行初期就宣布了审判。 我实际上还无法找出结果。 |
| |
所以我不知道他们是否仍在等待中或那里发生了什么。 但正如您所看到的,他们开始向男性Covid患者注射雌激素,以查看是否有帮助 |
| |
生存。您知道,这就是我们处于婴儿期的水平,即女性免疫系统的机理。 |
| |
这确实使我想起了这次细胞试验,这是我在研究《隐形女性》时遇到的。 一项2016年的细胞试验,将雄性和雌性细胞暴露于雌激素然后暴露于病毒。 |
| |
雌性细胞能够利用雌激素抵抗病毒。 雄性细胞不能利用雌激素抵抗病毒。 因此,有一个很好的例子说明了为什么必须按性别对数据进行分类。 另一个例子 |
| |
我遇到的非常有趣的是这个问题 |
| |
来自肌肉组织的干细胞,以及认为它们不可预测的地方 |
| |
直到有人分解数据并意识到雌性细胞促进再生,雄性细胞才开始再生。 我最近说过,最近有一项非常有趣的研究-最近我写这本书时, |
| |
研究在哪里...与昼夜节律和心脏病发作的存活率有关。 这是在动物研究中 |
| |
多年以来,只有一种...关于这个的黄金标准想法 |
| |
基于昼夜节律的生存,然后这项研究把整个事情颠倒了,每个人都超级困惑。 到底是怎么回事? |
| |
好吧,事实证明,所有先前的研究都是在雄性小鼠中进行的,而这项研究是在雌性小鼠中进行的。 无论如何,所以性别会分解您的数据, |
| |
在这种大流行期间我们没有这样做,在此尚不清楚这种疾病有特定的性别影响。 |
| |
这是三月份的比赛状态。 到3月底,在20个最有效的国家中,只有6个国家正确发布了按性别分类的数据。 |
| |
美国和英国直到4月才开始报告此数据... |
| |
开始报告...对不起...按性别分类的死亡数据,直到5月,他们才可以报告有关案件的按性别分类的数据,这显然是您需要的。 您需要知道男人是否更有可能患上这种疾病 |
| |
或一旦染上这种病就更有可能死亡。 但是,由于我们不是在收集和发布这些数据,所以在大流行开始时浪费了大量时间, |
| |
事情还不是很好。 到了9月,世界上只有30%的国家报告了按性别分类的病例和死亡数据。 |
| |
而且,只有不到一半的高收入国家/地区发布了这些数据。 因此,这不是资源问题。 这是优先事项,实际上也是三分之一...抱歉,有些国家 |
| |
从那以后停止报告按性别分类的数据。 嗯反正 我,哦,我想我快要结束了,但是我真的很想快速与您讨论算法。 所以 |
| |
如您所见,只有中年男子会心脏病发作。 是的,我敢肯定,您的药房同事会告诉您,实际上并非如此。 |
| |
实际上,心脏病是欧洲和美国女性死亡的主要原因。 |
| |
社会经济背景较低的女性比同等收入水平的男性患心脏病的可能性高25%。 |
| |
如果女性心脏病发作,女性被男性误诊的可能性比男性高50%,并且死于男性的可能性更高。 年轻女性死于医院的几率几乎是男性的两倍。 对于常用的风险预测模型提出了一些担忧, |
| |
因为它们是针对至少三分之二的男性患者群体开发的。 |
| |
早在2016年,美国心脏协会就提出了这种担忧。 那么,为什么Google图像搜索结果将心脏病发作作为中年男子的事情。 |
| |
不是因为阴谋,而是因为那是经过训练的数据。 它比一些误导性的Google图片差很多。 |
| |
因此,到去年年底,英国新闻媒体报道了一项研究,标题是“!心脏病发作”。 |
| |
可以预测AI ...对不起...可以预测心脏病发作五年前的AI。\!“ 对? 听起来很棒。 这就是我们的梦想。 这就是我们正在开发AI的目的。 |
| |
但是,当您查看该论文时,实际上是这些研究以及……您知道的……用于所有三项研究的数据都是男性占主导地位的。 |
| |
该论文本身几乎没有提供按性别分类的数据 |
| |
它当然没有提到糖尿病是女性较高的危险因素, |
| |
吸烟是女性的较高危险因素。 那么,如果在心脏病方面,甚至没有考虑到性别差异,那么这个AI会做什么工作? |
| |
当然,比这更可怕的是,算法不仅仅反映了我们对我们的偏见。 对。 这不会像其他有偏见的医生那样糟糕,这将变得更糟,因为机器学习 |
| |
实际上,这大大增加了我们的偏见。 因此,在2017年举一个例子,有一项令人担忧的研究出来了 |
| |
量化该放大偏差。 他们所做的是,他们在这个非常常用的图像数据集上训练了一种算法。 |
| |
而且该数据集存在这种偏见,即烹饪图片令人惊讶,惊讶,其中女性比男性高33%的可能性。 |
| |
但是,在算法完成训练的那一刻,它开始给图片加上标签...将68%的烹饪图片与女性联系起来。 所以,你知道,这是在标记男人的照片 |
| |
作为女人,只是因为她们站在火炉前。 |
| |
并且论文还发现,越强……原始偏差越大,放大效果越强。 当然,在医学界,由于历史上未能将女性纳入研究范围,以及在许多情况下持续失败,我们有很大的偏见。 |
| |
那么,嗯,我们该如何解决呢? |
| |
这是您不解决的方法。 亨利·希金斯效应。 因此,对于那些不是音乐剧大粉丝的人来说,亨利·希金斯(Henry Higgins)的效果是,我建议您 |
| |
纠正这一点, |
| |
这来自我的淑女。 亨利·希金斯(Henry Higgins)是主角,我想是主角之一 |
| |
在“我的美丽女士”中,他接了一个女花童伊丽莎,说,我要请你……我要训练你要高贵,在大使馆舞会上向大家展示,每个人都会以为你再一位女士。 我会教你怎么说的 |
| |
但是她比他期望的更加顽强,他变得非常沮丧,他唱了这么大个数字:“为什么女人不能更像男人?” |
| |
这就是我所说的亨利·希金斯效应,因为这是我在研究过程中不断遇到的问题。 很多时候,非常好的意思是尝试修复 |
| |
任何差异,性别差异,性别不平等都很好,让我们训练女性变得更像男性 |
| |
这样就可以解决问题,无论问题可能是什么,而不是着眼于潜在的系统性问题。 我认为很有趣的一个例子来自 |
| |
语音识别软件供应商,他谈到了自己的语音识别软件不太可能 |
| |
识别女性的声音。 这实际上很常见,这是因为大多数语音数据集都是男性,所以很清楚这里有什么解决方法。 你只需要 |
| |
收集更多女性声音,这并不难做到。 但是无论如何,这个家伙说也许女人应该接受数小时的长时间训练,以解决女人声音中的许多问题。 |
| |
但是可悲的是,女人似乎并不想屈服于那,只是整个女人,不是吗? 然后,但是,您知道,您会以类似的方式看到它 |
| |
工作场所的主动性,真正意义上的工作场所主动性,例如让我们训练,训练女性更有自信地要求加薪,要求提拔。 |
| |
好吧,实际上有证据表明,女性要求男性加薪的可能性与男性相同。 他们获得它的可能性较小,这导致了 |
| |
训练女性变得更像男性,这实际上是女性在行为上不会得到同等的对待 |
| |
像男人一样。 实际上,有一个很好的理由说明女人的行为不像男人,这不是我们不合逻辑,缺乏理智,而是我们知道我们不会得到同样的接待 |
| |
如果您知道,我们似乎对所有这些用在女性身上的话都感到发push,专横或顽强。 |
| |
但是,您也知道,我发现有趣的是,这种假设是,男性拥有正确的水平,男性所做的事情是正确的。 |
| |
是正确的水平,您确实需要提防并纠正它。 因为通常这会使您误入歧途。 |
| |
我想和您谈谈三个石炉,但我真的没有时间。 |
| |
因此,您只需要购买本书并阅读有关的书,因为在设计和收集有关女性的数据之前,这是一个非常非常有趣的案例研究。 |
| |
因此,我将总结一下在您的决策中考虑性别的三个规则。 所以第一 |
| |
这是女性的经典写照 |
| |
顺便问一下上厕所。 即使在军队中,妇女也必须排队上厕所。 第一,记住女人不是失败的男人。 好的。 所以不要想 |
| |
男人是标准,中立者,以及我们如何使女人变得更像男人,或者为什么女人与男人不同? 对待女人是完全理性的 |
| |
多样性,多样性,多样性。 让我举一个例子,我想我确实总结了为什么您想要一支多元化的团队... |
| |
一个多元化的设计团队,这是我的投票问题之一。 因此,在2014年,苹果大张旗鼓地发布了其健康追踪器应用程序。 |
| |
他们说,这是一个全面的健康跟踪器应用程序。 它非常全面,您可以跟踪您的 |
| |
钼,您可以跟踪您的铜摄入量。 我真的很生气,不打算对此进行民意调查,因为我真的很想知道。 |
| |
你们中有多少人追踪钼和铜,也有多少人知道如何追踪,因为我当然不知道如何追踪其中的任何一个。 |
| |
但这是我错失的机会。 如果有人可以巧妙地提出民意调查问题。 而且无论如何,因此您可以跟踪那些,但无法跟踪您的期间。 |
| |
现在,我要在这里转弯说,追踪钼酸钾或铜摄入量的人要多得多。 |
| |
嗯,但是真正的问题是,为什么苹果公司将其排除在外,有两种选择。 一, |
| |
他们讨厌月经,他们认为月经令人恶心,他们不希望它们出现在Health Tracker应用程序中。或他们忘记了时代的存在。 而且我认为他们更有可能忘记时期的存在。 他们为什么忘记时期的存在? 因为他们的设计团队没有足够的女性。 |
| |
因此,这对您而言只是一个寓言。 最后,第三点也是最重要的一点是,总是总是收集按性别分类的数据。 您永远都不知道为什么,何时才可能如此。 |
| |
仅以另一个示例结束,即使这对您自己的研究并不重要,对以后的元分析也可能很重要。 |
| |
我在研究《隐形女人》时遇到的一项研究是在研究CRTD,对于您不知道的人来说,这是一种 |
| |
基本上是非常精密的起搏器 他们通过对先前的研究进行了荟萃分析,得出按性别分类的数据,该阈值水平是针对男性... |
| |
被定为男性水平,而对女性来说定为太高,这基本上意味着 |
| |
妇女死了。 基本上,妇女死于阈值水平过高,直到他们进行了荟萃分析。 |
| |
的论文,并且能够重置该阈值水平。 因此,随着时间的流逝,我将关闭一点点。 我希望你能原谅我。 实际上,随着时间的流逝,我现在已经知道了,对此我感到非常抱歉。 如果可以的话,我将停止共享屏幕。 |
| JMP Anne Milley |
非常感谢你,卡罗琳。 真是令人着迷。 |
| |
不,不,很好,很高兴听到您提供如此出色的例子和值得深思的东西。 听众确实提出了许多问题,谢谢。 如果您还有其他问题,请通过Zoom Q&A提交 |
| |
窗口。但是,让我们跳进去。 您是否考虑过与美国国家职业安全与健康研究所联系,以获取有关如何对人体进行面部适配测试的信息? 在设计过程中如何考虑不同的面尺寸? |
| 卡罗琳·克里斯多·佩雷斯 |
好吧,我实际上还没有联系他们。 不,实际上,我确实是在尝试查找数据的一开始就与他们联系的,并且 |
| |
那时我是在专门查看数据。 但是,是的,我确实需要回去,回到他们身边,原因之一就是我……看来,原因之一就是我对这种情况非常生气 |
| |
这种“一刀切”的态度不必要地使医疗保健工作者和其他一线工作者面临风险。 |
| |
但同时,我目前正在写我的下一本书,我想更多地关注解决方案而不是问题。 因此,我没有联系他们。 |
| |
也许您是在问我,因为您认识那里的某个人。 如果您是,请与我联系。 对于任何联系我都会非常非常感激,因为显然,这些庞大的官僚机构很难获得一个好的电子邮件地址或电话号码。 |
| JMP Anne Milley |
我们知道您擅长将女性数据排除在决策之外。 您是否也了解其他人群的大数据缺口? |
| 卡罗琳·克里斯多·佩雷斯 |
嗯是的 从根本上说,这是各个领域中各种问题。 例如,绝对存在种族数据差距, |
| |
在AI方面,我们越来越多地看到这一点。 因此,您知道,诸如面部识别软件之类的经典示例无法识别女性面部和黑人面部。 尤其是黑人女性的面孔。 |
| |
英国广播公司(BBC)记者金·金(Kim ???)实际采访了我,他告诉我她有问题 |
| |
买那些电动的...对不起,不是电动的...那些自动水龙头,就像机场和其他东西一样,它们只是没有 |
| |
认出她的手。 您知道,因为它们是较暗的手,只是看不到它们。 因此,绝对有周围的数据空白。 很难找到好的 |
| |
有关它们范围的统计数据,这是因为我们不对数据进行分类。 所以当我写《看不见的女人》时,我真的很想能够谈论这些差异,例如,白人女性,强壮女性,有色女性之间的差异,但是 |
| |
从根本上讲,这真的很困难,因为您可以进行任何分类, |
| |
通常,您可能会进行性别分类,可能会进行种族分类,但是您永远不会在一起。 因此,例如,如果您要查看的是,尝试找出 |
| |
英国有黑人少数民族女教授, |
| |
当我尝试写这本书时,这些数据不可用,因为您可以找出有多少位BME教授,有多少位女教授,但不能同时找到两者。 因此,这本身就是一个令人沮丧的问题。 |
| JMP Anne Milley |
确实是的。 嗯,这么多问题来了。 所以我想尽可能多地参加。 卡罗琳(Caroline)列出了性别数据差距,并列举了很多例子。 她是否知道这些大公司(如Apple,Google等)的有意识的努力,并将其添加到AI努力中? |
| 卡罗琳·克里斯多·佩雷斯 |
而且,我不知道,但这并不意味着它没有发生。 我实际上已经与Google进行过交谈,并与这些大公司反复交谈,很难知道 |
| |
谁会给你一个直接的答案。 你被送到公关部门 |
| |
很明显,它们告诉您它们是真实的,但我不知道它实际发生的程度。 苹果。 我从来没有说话。 也就是说,他们已经释放 |
| |
或今天宣布,他们将发布一款拥有与您发布的其他产品一样高规格的较小型智能手机,这是 |
| |
非常令人兴奋。 我不知道这是否是因为我抱怨书中的智能手机太多,但我当然认为这是我的胜利。 |
| |
是的,很难说出来,因为很难得到一个直接的答案。 你知道,正如我所说,我一直在努力寻找是否 |
| |
有按性别分类的口罩数据。 而且,您知道,制造商也没有告诉我,甚至令我感到惊讶的监管机构也只是无视我。 |
| |
所以很难。 真的很难 您只能真正了解产品的效果,而这当然是AI的一大难题。 我的意思是,我是监管的坚定支持者 |
| |
之所以选择AI,是因为几乎没有感觉到科技公司真正了解他们所做的工作会对社会产生影响。 您知道,事实上我们正在将不平等编码在未来,以及 |
| |
我迷失了方向。 对不起。 |
| JMP Anne Milley |
没关系。 我们有很多。 如果来 |
| |
返回,您可以跳上它。 |
| |
好吧,下一个是在最近几年中,性别是一种社会建构的观念正在增长,诸如非二元性,性别流动性等的描述符正在越来越被接受。 这种运动会威胁到您的工作吗? 一些科学家, |
| |
例如,黛博拉(Deborah)??指出,没有任何描述性别差异的工作得到资助。 |
| 卡罗琳·克里斯多·佩雷斯 |
好吧,我认为您需要区分性别。 所以性是你的生物学,性别是你的生物学。 我认为大多数人都会同意...嗯,当然,我会主张,这是一种社会建构。 我不认为你是天生的, |
| |
如果您是女性,则要谦虚,对,或者喜欢粉红色。 那就是您所说的性别。 当您谈论性时,它是在谈论生物学差异, |
| |
在各种医学和研究领域中都非常清楚,但是,仅通过对人类的观察,就可以知道。 有些人有胸部。 有些人没有。 我会说到 |
| |
尤其是在医学研究领域跨性别人士,我认为这是一个巨大的差距,但这与某人提出的问题有关 |
| |
我认为这是一个真正令人担忧的差距,因为很少有研究,例如,您知道 |
| |
对于使用性激素的人,正确的治疗方法是什么? 这些激素如何与药物相互作用。 他们在治疗某人吗 |
| |
以正确的方式? 他们按性别对待他们吗? 他们根据性别对他们进行对待吗? 他们是否考虑到所有这些差异? 因为我们知道的一件事是细胞性别 |
| |
确实会影响疾病的发展和各种疗法,荷尔蒙也是如此。 如果我们不追踪那些... |
| |
好吧,基本上我认为,除非有人和好人……人……医学界的每个人都真正掌握了它,否则将来可能会出现医疗事故诉讼。 这真的很令人担忧。 就是这个 |
| |
实际上和最近有一些事情 |
| |
肾脏疾病,特别是跨性别者,以及如何治疗肾脏疾病,基本上是因为 |
| |
跨性别者,没有得到正确的治疗,实际上几乎已经死亡 |
| |
因为没有考虑到它们是反式的,以及这些不同的治疗方法可能如何与他们的身体相互作用以及应该设定什么样的不同阈值。 |
| |
因此,我认为,从这个角度以及我们不能按性别对数据进行分类的角度来看,这更值得关注。 |
| JMP Anne Milley |
我认为对我们的观众来说,真正重要的一点是,在很多方面都存在差异问题,而这些问题并未得到衡量, |
| |
数据的变化以及对我们要回答的问题和我们要寻找的解决方案意味着什么。 因此,谢谢您的评论。 |
| |
因此,我们还有更多问题,让我们看看是否可以解决更多问题。 对于应该标识为不同性别的人,应该如何分类数据。 |
| 卡罗琳·克里斯多·佩雷斯 |
数据应该如何...嗯,我认为记录出生时的性别非常重要,然后 |
| |
性别认同。 我的意思是,您应该同时拥有这两者,因为您知道,您需要同时了解两者。 我认为这很简单。 您需要同时了解这两个方面,尤其是在医疗领域以及在其他领域,以便能够正确地治疗患者。 |
| JMP Anne Milley |
是。 好。 |
| |
这里有一个。 是否有汽车制造商在其工程中考虑到女性身体的生物量? |
| 卡罗琳·克里斯多·佩雷斯 |
好吧,这是一个非常有趣的问题。 因此,沃尔沃肯定会声称他们这样做。 但是,他们不会向我提供任何数据来支持此操作。 |
| |
是的,据我所知,不,我认为他们很难做到这一点,因为您不存在普通的女性撞车测试假人。 虽然 |
| |
汽车制造商正朝着计算机建模方向迈进,实际上,当您查看这些计算机模型时,它们往往仍基于 |
| |
测试是使用假人而不是人体测量,因为假人是测试中使用的假人,因此他们需要设计汽车才能通过测试。 |
| |
因此,实际上,这实际上是一个法规问题。 同样,它需要来自监管机构。 他们需要认识到存在女性尸体,女性尸体将出现在汽车和驾驶汽车中 |
| |
以便制造商可以为这些车身设计。 因为目前,如果他们要通过测试,他们将不得不专注于假人代表的这些非常具体的身体类型。 |
| JMP Anne Milley |
好,很好 因此,NIH(美国国立卫生研究院)和动物研究领域发生了新变化,需要笼舍共同居住并使用男性和女性受试者。 |
| |
过去两年来,这一直是赠款审核者评论的一部分。 您是否有可能支持这一趋势的数据? |
| 卡罗琳·克里斯多·佩雷斯 |
我不知道任何数据共享有什么区别。 我确实知道,美国国立卫生研究院(NIH)首次成立时包括女性受试者 |
| |
在人体试验中,数年后,总帐办公室进行了审查,实际上严厉批评了国立卫生研究院(NIH)不执行该法规。 当然可以 |
| |
我曾经说过的一些专家抱怨说,与现在所做的事情一样,这些法规已经存在,但是它们不够具体,以至于人们会捏造它,而且他们没有得到适当的跟进,这确实令人沮丧 |
| JMP Anne Milley |
嗯 |
| |
哇,在设计研究,实验和产品时,有什么技巧可以确保我们认真考虑克服性别偏见? |
| 卡罗琳·克里斯多·佩雷斯 |
抱歉,您可以重复这个问题吗? |
| JMP Anne Milley |
在设计研究,实验和产品时,您有什么技巧可以确保我们仔细考虑如何克服这种性别偏见? |
| 卡罗琳·克里斯多·佩雷斯 |
是的,我确实有提示。 我的建议是包括女性。 |
| |
并且有很好的证据表明 |
| |
多元化的团队意味着您更有可能进行性别分析,以按性别分解数据。 这是分析... a |
| |
回顾几年前的研究。 我记不清到底要多少年了,但是您知道这是一项非常有力的研究,发现在团队中有女性与记住在研究中包括女性之间存在着很强的相关性。 |
| |
然后还有一个问题,那就是回到苹果健康跟踪器应用程序,您知道这不是一种恶意问题。 这不是 |
| |
男人故意排除了女人。 在这种情况下,您不必了解您可能要研究的所有问题。 所以我...这真的很有趣 |
| |
凯西·奥尼尔(Kathy O'Neill)几年前在这篇文章中接受采访时的文章... |
| |
这是一家招聘AI公司,他们开发了该AI,旨在寻找... |
| |
这是招聘编码员。 他们不仅查看您的简历和工作经历,还查看您的社交数据。 他们基本上是在互联网上为您寻找的。 她采访的人说,他们发现的一件事是 |
| |
那些访问过该日本漫画网站的人被认为是更好的编码员。 |
| |
提出来的原因是,这并不有趣。 如此有趣的一点关联。 这是您在简历中找不到的东西。 |
| |
但是正如Kathy O'Neill所指出的那样,漫画网站在男性中占很大比例,如果访问这样的网站,您很有可能会成为男人。 好吧,为什么呢? 由于多种原因。 第一,他们不一定 |
| |
像这样的网站欢迎女性 而且女人的时间更少。 在美国,女性的休闲时间比男性多五个小时。 |
| |
因此,除非您对性别有正确的认识,否则女性对无偿护理工作的担负比例过高。 当您同时考虑有偿和无偿护理时,妇女的工作时间会更长。 您知道互联网上的厌女症,以及可能如何 |
| |
阻止女性访问某些网站,您将最终设计出一些东西 |
| |
最终可能会完全不知不觉地歧视妇女,当您打算做什么时,您就会知道...这本来是不分性别的产品。 他们想找到 |
| |
最好的编码员,但是实际上他们所做的是,因为他们没有将性别纳入分析范围,因此有可能找到最好的男性编码员。 |
| |
而且,我只是认为,如果团队中有更多女性能够指出这种类型的差距,那将不会发生。 另一个例子是,事情在这方面很有用 |
| |
在这方面,它与研究无关。 但这就是雪莉·桑德伯格(Sheryl Sandberg)在书中写的一则轶事, |
| |
精益求精,在Google工作期间怀孕的地方。 |
| |
她的职位足够高,可以走进Google的负责人,并说您需要设置怀孕停车场。 你知道,这种穿过停车场的行径杀死了我。 |
| |
我认为他的反应令人着迷,是的,是的。 我从来没有想过。 我只是以为,当然不是。 为什么, |
| |
如果您没有怀孕,就不会怀孕。 我也不会怀孕,我已经怀孕了。 |
| |
但是它需要一个能担任高级职务的女士,她能够打这个电话, |
| |
因为我敢肯定Google以前有孕妇,对吧? 我敢肯定,那里有怀孕的清洁工和怀孕的客户经理,无论他们在那里有什么,但他们不能 |
| |
去要求它。 所以,这只是一种说法,实际上,不仅仅是拥有一定数量的女性。 它还确保您具有正确的级别,以便他们指出这些差距并进行更改。 |
| JMP Anne Milley |
是的,很好的建议。 您可以做的另一件事是更仔细地思考,就是读下一本书出版时。 |
| 卡罗琳·克里斯多·佩雷斯 |
绝对。 您是一个比我更好的营销人员。 |
| JMP Anne Milley |
好吧,我还想提到,过去的另一次Discovery Summit欧洲峰会的全会发言人戴维·汉德(David Hand)也提到您的书是黑暗数据的绝妙例子,这是他最新著作的名称,因此也许你们可以在另一本书上进行合作。 |
| 卡罗琳·克里斯多·佩雷斯 |
也许。 |
| JMP Anne Milley |
那里有很多黑暗的数据。 |
| 卡罗琳·克里斯多·佩雷斯 |
是的,也许,也许您可以使我们保持联系。 |
| JMP Anne Milley |
好的。 |
| |
谢谢。 非常感谢您分享您所有有趣的研究,我们期待您的下一本书, |
| |
但与此同时,我建议观众如果没有的话,请拿起她的书。 我们有一些我也可以放弃的东西。 并感谢您参加我们今天的全体会议最后决赛。 |
| 卡罗琳·克里斯多·佩雷斯 |
非常感谢您有我。 |
| |
谢谢。 |
| 卡罗琳·克里斯多·佩雷斯 |
再见。 |