今天,我将与Duolingo的联合创始人兼首席执行官Luis von Ahn进行交谈,Duolingo是一款流行的教语言的应用程序。现在从事语言业务是一个有趣的时间:如果当前的人工智能技术状态有任何内容的话,可以就这样,用不同的语言与那些听不懂你说什么的人胡言乱语。
那意味着有很多机会可以用人工智能来提升类似杜克语言的产品,而Luis和我讨论了某个叫做的新功能的一些内容。 注意:原文中“Duolingo”应为“多邻国”,并且提到的“Duolingo”在这里应该是“DucLang”或类似的名称错误,假设是特定产品名,因此保留不翻译。“叫做了…”部分原文缺失具体内容,所以未做进一步翻译。杜利诺 Max,提供与某些角色聊天的功能和甚至视频通话带有名为Lily的AI虚拟形象。
我想谈谈所有这些,但也想和路易斯谈谈一般的学习问题。如果你像我一样,你可能已经多次开始又停止使用杜洛林;如果你是个追求卓越的人,你现在可能正保持着连续学习的记录,甚至今天还得继续维持下去。这个连续学习的记录是关键所在,你会听到路易斯反复强调这一点作为重要的理念。
听解码器,一档由主持的节目The Verge是尼拉伊·帕特尔关于大主意——以及其他问题。订阅这里!
参与是关键,他说,因为单纯地出现是实际进行语言学习的基石。你无法教导一个没有参与其中的人,因此随着时间的推移,Duolingo变得越来越像一款游戏,因为人们喜欢玩游戏。
但是游戏化和实际学习之间确实存在矛盾。Luis很高兴承认这种矛盾的存在,并对此进行了深入思考。对他来说,游戏化是重要的部分,因为它不仅让你回到Duolingo平台,让业务顺利进行,而且还能够产生Duolingo所追求的语言能力提升的效果。
路易斯详细解释了资金的来源。正如你可能猜到的,这些资金来自像美国这样的富裕国家的iPhone用户。Duolingo早期做出的一些技术决策意味着iOS版本优先,因此应用的安卓版本的功能更新可能需要一年或更长时间才能推出。
但是杜乐宁是一个全球性的产品,在使用它的学习者中,实际上有最多的人正在尝试学习英语——而这些用户是方式更有可能使用安卓手机,并且想要或需要产品的免费版本。这里有很多矛盾,你将听到路易斯谈论他自己的童年在一个较贫穷的国家长大以及这对他的决策有何影响。
这是一个很好的案例——Luis是公司的创始人,他帮助公司上市了,现在又在帮助公司迎接一个相当大的技术变革。人工智能对他所制造的产品有着直接影响,我们对此进行了直接的讨论,只是开了几句玩笑。创始人模式当然,我问他是否批准所有杜olingow在社交媒体上说的一些离谱的话.
好的,Duolingo首席执行官Luis von Ahn。开始吧。
本记录已稍作编辑,以简化并提高清晰度。
路易斯·冯·安,你是杜尔利ngo的首席执行官和联合创始人。欢迎来到解码器.
感谢你的邀请。
我常常会先问CEO他们的公司是做什么的,但我觉得每个人都清楚Duolingo是什么。如何你定义杜课(Duolingo)?
这是一款教授语言的应用程序。这是我们最出名的。在过去的几年里,我们还推出了其他功能。教授数学和音乐这是世界上学习语言最流行的方式。一个小知识:在美国,使用Duolingo学习语言的人数超过全美所有高中的总和。这一情况在世界上的大多数国家都是如此。我们教授语言的学生数量超过了公立学校系统的规模。
你有一些重要公告即将在Duocon上公布的功能之一是该能力将于本期节目播出时对公众开放。其中一个功能是能够与像莉莉这样的角色聊天等。
是的,能够与他人视频通话的能力莉莉.
那怎么行得通?你是怎样做到的?
我们有这个人物名单我们的用户都很喜欢。其中一个是一个留着紫色头发的 emo 少女,她对你非常不以为然。你现在可以和她交谈来练习你的对话技巧,并且你可以和她进行非常好的对话。她的很多地方都非常令人惊叹。首先,她会适应你的水平——因为我们知道你在 Duolingo 上的学习情况,所以我们很清楚你的水平。
另一个问题是她有记忆,所以记得上次你们谈论的内容。例如,我今天刚刚和她聊天时,她还记得上次我们谈到我喜欢涅槃乐队的事实。她告诉我她最喜欢的是“Smells Like Teen Spirit”这首歌。
轻松的选择,我不得不说。
我们暴露了我们的年龄,但没错。这些对话相当有趣,你可以练习你的语言。完全是口语化的,效果非常好。我们非常高兴,因为这是第一次你觉得“我们真的不需要人为干预了。”
这些动画是什么样的?它们是现成的动画吗?它们是循环播放的吗?这到底是怎么工作的?是实时的吗?
是的,它是实时动画。我们为她制作了动画骨骼。我们在底特律收购了两家动画工作室。这就是为什么我们在底特律有一个办公室。他们做得非常好。当她说话时,她的嘴会动,并且与她说的话相匹配。她会在你面前翻白眼。
当你考虑那项投资——“我们要开始为角色建造实时渲染的场景和动画”——我只想说成本问题。这是一笔很大的投资。你认为这会让现有的用户支付更多的钱吗?还是会让你吸引到新的用户?
我认为两者兼而有之。我们认为这是继续改进应用程序的工作。我们在很多地方使用了很多动画,我们看到这作为继续完善应用的一部分。而且一般来说,随着我们不断改进应用程序,我们会吸引更多的用户,并促使更多的人付费。
我在这种情况下提出这个问题的原因是,目前人工智能的经济前景仍然充满不确定性。我问所有进行投资的人,你们如何看待未来的回报?
对于这个特定功能,我认为它是大型语言模型的极佳应用,在我们这边运行得相当不错。
你另一个重要的公告叫做“冒险”。这听起来像是一款电子游戏。那里的具体情况是怎么样的?
杜克语言的工作原理是,主屏幕基本上是一条路径,你只需要完成课程。现在有些课程将会是我们称为“冒险”的东西,其实就是那种让你移动角色的视频游戏。它的酷炫之处在于你在杜克语言上学习如何解决现实世界中的情况。
例如,它就像一个小视频游戏,你在其中扮演一个角色,并被告知“好的,去买个披萨吧。”你需要移动并四处询问,然后问一些人,他们会告诉你,“哦,那家卖披萨的地方在那边。”这非常有趣,还能帮助你学习如何在现实世界中导航。所以我们一直在开发这个功能。这个功能很酷的一点是,所有的情景大多是通过AI生成的。在过去,要扩大这种功能规模需要很长时间,但由于使用了AI,我们能够相对快速地实现规模化。
我今天早上用了Duolingo。我对学习印地语有着漫长而复杂的历史。它是免费的。我今天也是免费使用的。这款应用程序是如何赚钱的?
它是免费的。您可以完全免费使用,无需支付任何费用。如果您不付费,则可能需要观看一些广告,我们通过广告来赚钱。但是,如果您想关闭广告,可以付费订阅,这样不仅可以关闭广告,还可以获得一些额外的功能。我们也从订阅中赚钱,实际上,大部分收入来自订阅。
Duolingo作为一家公司是否盈利?
我对这个很感兴趣。我们几乎从每个人那里都听说了这种分裂:我们一开始想要扩大用户基础,广告有助于实现这一目标。这帮助我们将产品保持免费状态。然后真正的收入将会在我们增加价值并引入付费订阅时到来。特别是最近由于苹果平台上的应用跟踪透明度问题,以及来自全世界其他平台的巨大库存涌入,似乎比以往任何时候都更难通过广告赚钱。你也有这种感觉吗?
这可能是真的。广告从来不是我们的优先事项。我不知道确切的数字,但大概是我们的收入有6%或7%来自广告。对我们来说,只要它们存在,就能成为人们订阅的一个理由。但是总体而言,我们大约80%的收入来自于订阅,尽管顺便说一下,我们每月活跃用户中只有不到10%的人付费订阅。也就是说,我们每月活跃用户中的10%为我们贡献了超过80%的收入。
所有的收入都来自语言相关的业务吗?还是数学相关的内容也在增长?
大多数是语言。数学和音乐在增长。我们大约在一年前推出了这些,所以它们才刚刚开始。绝大多数是语言。
哪些语言最受欢迎?
英语远远是最受欢迎的。我们的活跃用户中有45%在学习英语。其次是西班牙语,第三是法语,然后数量急剧减少。
你的大多数用户在美国以外吗?还是在美国境内?
美国用户约占我们的20%,而80%是国际用户。
你的用户中有80%是在尝试学习英语吗?
大约45%的人正在努力学习英语。在国际部分,他们还想学习其他语言。
应用提供了很多语言选项,似乎有一种资源配置的方式是这样说:“英语是最受欢迎的,我们会把最多的资源放在那里。”但这种方法感觉并不符合该应用的实际操作方式。你是怎么考虑这个问题的?
我们确实做了一些这样的事情。本来要说我们做得不够多,但我不知道这是否属实。我们的投入并不与用户数量相匹配,因为我们可能会把所有资源都用在英语、西班牙语和法语上。我们在前八种语言的学习上投入了大部分资源,在此之外的则很少投入。前八种语言包括英语、西班牙语和法语。然后是德语、意大利语、日语、韩语、葡萄牙语,我想还有中文。
普通话还是粤语?
普通话。之后确实有一个很大的下降。例如,阿拉伯语是一个大语言,但学习阿拉伯语的人并不多。所以我们也会投入一些资源,但这远少于对更大语言的投入。
你如何看待这种需求?我打开Duolingo,看看它,心想:“我应该学一点粤语。”我想,“天啊,我的印地语应该比我现在的水平好得多。”这些都是我一直思考的实际问题。我觉得跟我有相同背景的人中有很多人也这么想。但这是一种潜在的需求。你会不会走出去对别人说:“你应该学点西班牙语?”
我们不这么做。
你是否曾经说:“我们应该在美国南部推广西班牙语?”
我们没有。对于这一点,我们保持中立态度,但有趣的是,学习语言的需求并不像你期望的那样与说该语言的人数或甚至在地缘政治世界中的实用性相关联。例如,尽管中文是我们排名前八的学习语言之一,只有大约2%的用户在学中文。即使它是世界上使用人数最多的语言,这个比例仍然很小。
人们在考虑学习某种语言时会衡量其难易程度。对于英语母语者来说,汉语要难得多。我们有数据对于说英语的人来说,要达到西班牙语的一个不错的水平大约需要300到400小时。而对于汉语,则需要约2000小时才能达到同样的水平。事实上,在美国,如果你只是为了实用性和投资回报率考虑,学习西班牙语可能更好一些。在美国,你最好学西班牙语。这是一种相对容易学习的语言。
在美国,你最好学习西班牙语。这是一个营销信息。
好吧,我们不会这么说。我们尽量保持中立。如果我们开始强迫人们使用某种语言,我可能会在公司里遇到麻烦。
也许不是在应用程序内部,但作为一种成长的方式,作为一种吸引新用户的方法。看来现在很多人知道他们应该会多语言或至少双语,所以他们会使用Duolingo。但也有一大部分人,尤其是在这个国家,他们的态度是:“管他呢,我会说英语。”对他们来说,学习第二语言是有价值的想法是陌生的。
虽然我对我们在美国的成绩非常满意。历史上,在美国和英国并没有强烈的语言学习欲望。人们的看法是,“你可以学英语,我们很高兴。”在美国,80%的用户在使用Duolingo之前没有学习过其他语言。我们在美国正在扩大市场。英国的情况也一样。我对这个情况感到非常高兴。
我想起了在威斯康星州上高中的时候学法语的情景。学习一门语言是一回事,而与这门语言相伴的文化又是另一回事,特别是某些地区的方言文化。在学校里学的法语大多是看面包棍的照片,这些内容和你的日常生活完全不相关。你有没有想过,在杜洛兹(Duolingo)这样的平台上,这里有一个巨大的文化组成部分?
我们做。
那是更多的投资,对吧?
我们会这样做,并尽量加入文化元素。但我们可能做得还不够多。我们主要集中在语言上,这也取决于具体的语言。有些语言与文化紧密相关,而有些则不那么密切。西班牙语就是一个很好的例子。大约有二十多个国家使用西班牙语,其中一些国家的文化差异很大。我们会稍微融入一些文化因素,但不会说“你正在学习西班牙语,所以你现在是一个戴着宽边帽的墨西哥人。”我们尽量避免这样做。当然,我们也需要注意不要冒犯任何人。不过我们会尽量加入一点文化元素,但我认为这不是我们的主要目标。
我这么问的原因是对于大多数人来说,Duolingo 的形象是由它的吉祥物代表的。我们应该讨论一下吉祥物的性格及其社交媒体存在感但是它与一个人教你语言有一定的抽象化。没有人在另一边说:“我正在教你这个。这是与此相关的文化。”你可能会有其他老师用不同的方式来教你。
那里有一种抽象概念,感觉非常有趣,尤其是当我们显然要讨论人工智能以及你们是如何使用它和扩展平台的时候。我想稍微深入探讨一下这种抽象。你认为这会导致人们学会了一种语言还是学会了如何沟通?
我们故意没有在应用程序中加入人类教师,但这并不是说人类教师有什么问题。从一开始,我们就是一家技术公司,我们希望用技术来教你。这样做的原因有几个。其中一个原因是使用技术来教学要比用人教师权益成本低得多。
另外一件事是,大约80到90%的语言学习者不想跟另一个真人交流。他们可能会告诉你他们想这样做,但实际上不会这么做。这是因为当你在学习一门语言时,你会对自己感到有些害羞,只有极度外向的人才会觉得用自己不太熟练的语言和陌生人视频交流是可以接受的。大多数人都不会愿意去做这件事。
多年来,我们进行了许多研究项目,因为我们曾考虑过是否应该增加人类元素。但这些研究成果是我见过的最令人惊叹的事物之一。当你与用户交谈时,你会问他们:“你觉得什么可以让Duolingo变得更好?”在过去,他们的回答往往是“和真人进行更多的实践对话。”确实如此。然后你再问用户:“所以你在告诉我如果我在Duolingo上添加一个人类元素的话,你们会使用它吗?”他们会说:“是的,我会用。”然后你可以继续问他们:“那么你会为此付费吗?”他们会回答:“是的,我愿意付钱。”随后你告诉他们:“那你现在想开始做这件事吗?”而他们的答案通常是:“不,不是现在。”人们就是不想立即去做这些事情。
那也就是为什么我们没有加入真人,我认为这是一个很好的决定,尤其是在我们现在可以利用大型语言模型相当好地让你练习对话的情况下。
我想问这个问题是因为我在节目中询问了很多人的意见:这些大型语言模型有什么用呢?你们要制作什么样的产品?我知道你们正在开发这些模型,而且感觉像Duolingo有一个非常自然的解决方案,那就是你可以和它对话,它也会回应你。无论每个人都在“胡言乱语”,只要你在练习说话就可以了。
这完全正确。这是一个非常好的应用。你说得对。即使它说了一些不太准确的内容也没关系,因为你只是在练习你的语言。此外,即使它犯了小错误也没有关系。有时候它会犯一些语法上的小错误,但是人们通常不会注意到这些错误,因为他们通常是西班牙语或法语的初学者。它还能很好地适应你的水平。大型语言模型非常擅长根据你的水平进行调整。
所以我们告诉它:“好的,适应一个西班牙语初学者。”我们甚至告诉它:“嘿,因为我们看到这个人曾在Duolingo上学习,所以实际上我们知道他们所掌握的所有单词。”于是我们告诉语言模型:“这个人的词汇量只有这200个词,请尽量只使用这些词。”这对这种情况非常有效。
你对人工智能的投资是多少?这是一个新产品。它非常昂贵。每个人都告诉我Nvidia的GPU成本有多高。你说你们刚实现盈利。这感觉像是你会因为投资于人工智能而再次亏损的事情。
我们正在投入大量资金。幸运的是,这在盈利能力方面对我们有利,原因有二。我们在两个地方投资于人工智能。第一个是生成将用于我们的课程的数据。那个数据过去部分由人类生成目前大多数内容都是用AI生成的,用AI生成的成本要比用人生成低得多。用AI生成也快得多,所以我们对此非常满意。
然后另一个大的用途是实时对话。这一个是昂贵的。提供与用户的实时对话成本很高,但我们不得不添加了一个更高价位的计划。我们现在有两个订阅计划。我们有超级多邻国(Super Duolingo),这是我们标准的订阅计划,我们新增了一个叫做多邻国MAX(Duolingo Max)的计划,它的价格大约是超级多邻国的两倍,并且提供对话练习功能。这虽然很贵,但人们愿意支付双倍的价格,所以对我们来说其实并没有影响。这个新计划对于我们来说运作得很好。
让我深入探讨一下经济学问题,因为总的来说,我很好奇这一切是否会带来盈利且可持续发展的公司。有很多资金流入这个领域。所以,你将运行推理的成本提高了两倍。那是别人的大型语言模型吗?
是的,我们使用OpenAI。
所以你从OpenAI购买了一些容量,购买了他们的代币,并以标准计划两倍的价格将它们转售给用户。你的转售利润是多少?
我不知道具体的比例是多少,但我确实知道这对我们的利润率是有好处的。
那就是我好奇的地方。我不知道这对处于这条产业链最底端的OpenAI来说是否有利。我不确定这是否对他们有利可图。但是当你基于这些技术开发产品时,似乎你的经济状况在某种程度上取决于他们的经济状况,因为你需要在此基础上增加利润率。这一切看起来非常复杂且脆弱,尤其是如果人工智能功能是吸引新用户的关键的话。
好消息是,目前人工智能功能并没有为我们带来新用户。
或者新的收入?
是的,它为我们带来了新的收入。那里的利润率很好。因此,出于多种原因,无论你是通过OpenAI还是微软进行同样的通话,其价格都会随着时间下降。一切都在变得更加高效,芯片的价格也在逐渐降低。目前有一定的缓冲空间,但我们预计这个缓冲会随着时间进一步扩大。至少对我们来说,我不太担心利润问题。对于我们的情况,利润率相当不错。
你认为这些模型在某种程度上是可以互换的吗?我越来越常听到的一种说法是,模��业务本身并不是重点;产品业务才是重点。
我认为答案是肯定的,但关键术语是“某种程度上”。它们在“某种程度上”是可以互换的。我们试图构建技术栈以便你可以进行替换,但实际上你会发现一些奇怪的问题,因为你可能花费了很多时间来测试正确的查询语句,并且你可能还做了一些微调。你可以进行替换,但是如果你这样做了,你需要花几个月的时间来确保这些奇怪的问题消失。
当你考虑这项投资时,你觉得是需要先投入资金,然后在后期变得更高效?还是觉得“这将是公司的未来,所以我们需要围绕大型语言模型的能力进行重建”?
介于两者之间。我认为大型语言模型对Duolingo将会非常有利——它们已经如此,而且我认为这种趋势将继续下去。不正确的是说大型语言模型解决了我们所有的问题。人们没有充分讨论的一个重要问题是,在教育领域,大型语言模型擅长教你东西,但不善于吸引你的注意力。而这正是教育中最难解决的问题。
最难的是我试图教你东西时,就是如何让你保持专注。不知为何,人们忘记了这一点。有些人说,“你可以用ChatGPT学习量子物理。”当然可以这么说,但这并没有什么了不起的。你也可以通过一本书来学习量子物理。用来学习这种知识的技术已经存在很长时间了,它叫书,并且很有效。只是人们真的不想读一本关于量子物理的书。同样地,大多数人可能也不想去找ChatGPT并开始问一些有关量子物理的问题。对于语言学习也是一样的道理。大型语言模型非常善于让你去练习,但要让你保持兴趣却很难。
我不知道大型语言模型在这部分是否会帮助太大。最终,这是一个令人难过的事情,但事实是Duolingo游戏化程度非常高。我坚信大多数人更愿意花费更多的时间玩游戏。糖果粉碎单职业.maxcdnusercontent.com/scripts/7d9f0c92b8.js?ver=5.9.3》比起和别人聊天,更喜欢独自一人。这可能是一个令人悲伤的事实。当然也有一些例外。我的意思是,人们喜欢和自己爱的人聊天,这是很好的,但现实是,大多数时候,大多数人宁愿花时间玩游戏。糖果粉碎 kostenlos或者在Instagram上滑动浏览比和别人谈话更有吸引力。我认为大型语言模型在这方面帮助不大。
你有很长的游戏化历史。你的第一个项目,哪一项?(注意:“哪一项”可能不适用于此处的语境,如果这里不需要疑问语气,请告知以便进一步调整翻译)原文中似乎缺少一些内容导致句子不完整,根据指示只输出可直接翻译的部分,因此补充信息或完成句子需要依据额外的背景。如需保持原句结构,保留为: 你有很长的游戏化历史。你的第一个项目,哪一项?你卖给了谷歌这是一款游戏化的应用。你完成了reCAPTCHA,其实质是以某种方式将训练数据游戏化。
你认为Duolingo有进化——最初你们的工作重点是提高用户黏性和让他们回到应用上来,有了角色设定,然后才是语言课程的内容吗?几年前当我第一次使用Duolingo时,我觉得“哦,这很熟悉。只是那只鸟一直缠着我不放,所以我才又回来了。”而现在你们谈论的是完全不同的另一个领域:我们将使用人工智能;我们将进行自然语言对话;我们还将扩展到数学领域。
你是什么时候觉得你们从“我们在为这个非常熟悉的事物加入游戏元素”和“我们正在使用这种新的参与机制”转变为“这现在是一个完全全新的事物”了?
从一开始,这就是我们在Duolingo坚信的一个核心论点:自学最难的地方在于保持动力。事实上,我们取得大多数成功的根本原因是我们很早就意识到了这一点。从一开始就致力于打造一个既有趣又能让用户持续使用的产品,这是我们所付出努力最多的事情。
内部而言,我们觉得学习一门语言就像锻炼身体。你是在椭圆机上、骑动感单车还是跑步,并没有太大的关系。最重要的是你要每天都坚持做这件事,无论你在做什么。这与Duolingo也是一样的道理。也许有些方法比其他方法更有效率,但最重要的仍然是你要每天坚持去做。我们在这方面做得非常好。现在,当我们非常擅长这一点后,我们开始尝试在教授的内容上增加更多的复杂性和深度,并且在过去几年里一直在这样做。不过始终不变的是,我们的核心使命是成为一个激励引擎。
那还是核心问题吗?
它仍然是核心。
我最终会问你大约创始人模式但是你是创始人。你怎么能保持聚焦于这一点而不是其他事情?
我确实这么认为。我会为此付出努力,但这不仅仅是我一个人的事情。在公司里,大家都很清楚,如果某件事不够有趣,那么这件事就不会成功。我们花了很多精力来确保多邻国有趣。这就是为什么当我们推出可以与AI聊天以练习对话的功能时,你并不是和一个随机的AI交谈;而是和我们的一位角色进行交流。这个角色有个性。实际上,我们做每一件事,每一次发布新功能的时候,都会思考“这必须得有趣”。我会推动这一点,但其实不需要我过多努力,因为公司里每个人都非常认同这一点。
杜 Ling 现在有多大?请注意,Duolingo 在这里通常是指“多邻国”应用或公司,所以更准确的翻译应为:“多邻国现在规模有多大?”
大约850人。
你们都在哪里?
最大的办公室位于宾夕法尼亚州的匹兹堡,那里有大约400人。我们在纽约有约250人,并且在几个城市设有办事处。我们在底特律、西雅图、柏林和北京各有一个办事处,这些办事处各有30人。但重要的一点是我们不支持远程工作,必须到其中一个办公室上班。
那是为什么?
我真心相信你可以用那样的方式更好地工作。我们所做的大部分事情,虽然不是百分之百,但大多数都是创意性的工作。在Slack和Zoom上做这些事要困难得多。在疫情期间这种方式持续了大约九个月的时间,但是当我们不得不转为远程办公时,我们的执行情况还是相当不错的,这确实令人印象深刻。但在那之后,我们逐渐没有新点子了。我们在执行已有的想法,但新的创意却枯竭了。非常奇妙的是,一旦回到办公室,在短短的三个月内,你会看到各种新想法涌现出来,这是因为当你远程工作时,你无法坐在白板前讨论问题。此外,我们每天在这里一起吃午饭,在排队打饭的时候,人们会说:“嘿,好久不见,我想起有件事要和你说。”这些都是你在Slack上永远不会发送的信息类型。
我认为所有这些结合起来使得这家公司变得更好。我没有太多证据,但我非常确信。
Sundar Pichai 在谷歌告诉我在疫情刚开始时他就担心,如果公司一直远程办公太久的话,他们可能会没有新的想法。他说:“我们知道接下来要做什么,我担心的是再下一次会怎样。”你在重新实施返回办公室政策时遇到了争议吗?
不,幸运的是不是。
你的员工那样认为吗?
不,不,不。
他们同意你的观点吗?
我们在Duolingo做了一些愚蠢的事情,但这件事回想起来并不是其中之一。在我第一次宣布“大家都将远程工作”时,我说:“但我们最终会回到办公室。我不希望Duolingo变成一家远程公司。我们不是一家远程公司。”整个过程中我们一直在这么说。很多公司在疫情期间都会招聘世界各地的人,因为反正你们都在远程办公。我们从来没有这样做过。当我们招人的时候,我们会说:“我知道你现在不来办公室工作,但你的职位是在纽约,而且我们期望你将来会回到纽约,因为我们很快就会回来上班了。”我们从未停止重复这一点。当最后宣布“是时候回办公室上班”时,这对任何人都没有造成意外。我认为这件事上我们没有失去一名员工。
你认为你在的市场有助于这一点吗——在匹兹堡和底特律?如果你是在旧金山,我想很多人会说:“去你的,我可以去找另一份工作。”
那可能确实如此。我们不在旧金山,这可能确实如此。尽管纽约办公室现在是第二大办公室,并且我们在纽约也没有失去人员。
你发现人们即使完全恢复办公还是会要求更多的灵活性吗?
当然。我的意思是,相比以前。例如,我们不再是每周五天都在办公室工作。实际上的工作方式是周二、周三和周四必须在办公室,周一和周五则是自愿选择。实际上的情况是大约一半的人会在周一来办公室,而约有20%的人会在周五来办公室。
我们在星期五谈话。
我在这里。虽然我在办公室里。
哦,你在那里。哦,很好。
我在这里办公室。我来了。但我感觉在这家公司我没有足够的影响力来说服大家,“好了,大家都必须每周工作五天。”我觉得那样做不会被接受。
疫情谜题和重返办公室的另一部分是旅行和探索的需求被抑制了。我有一些朋友,至少从他们的Instagram上来看,已经有两三年没有回到美国了。你是否接触到了那些想要边走边学习语言的人群?旅游的重新爆发对你的业务产生了影响吗?
旅行很有趣。现在我们是一家上市公司了,人们对我们公司的旅行问题做出了各种各样的猜测。
他们说,“旅游业正在开放,这对Duolingo可能是个好机会。” 或者他们会说,“旅游业在萎缩,这对Duolingo可能是坏事。” 实际上,旅游业对我们影响并不是很大。我可以猜测其中的原因,但我们并没有看到旅游业的兴衰对我们的业务产生多大影响。
我们有很多学习者,他们的动机各不相同,但主要的两大类都不涉及旅行。其中一类是作为一种爱好,这是在美国最大的一类。如果你问美国人在使用Duolingo的原因,最常见的回答是:“好吧,我过去经常玩很多……”糖果粉碎传奇或者我过去经常在Instagram上活动,现在我在做Duolingo,至少我在学习一些西班牙语。这只是我的一个业余爱好。
然后另一大群人是学习英语的人。对他们来说,这与旅行无关。他们只是需要为了教育机会或就业机会而学习英语。这两个主要群体占我们用户总数的90-95%。旅行对这种情况影响不大。
我们开始讨论潜在需求。人们来找你们是为了什么?然后是增长,即“我们要如何创造一些需求?”当你考虑公司的结构时,你会说“我们必须去做市场营销来促成旅行”吗?或者说这并不是你思考问题的方式?
不,关于我们市场营销方面,并没有考虑过那一点。我们90%的用户是通过口碑传播来的,我认为这种情况还会继续下去。我们在营销上的花费相对也很少。我们的全球营销预算仅为每年5000万美元,在我们这么大的收入规模下这其实是很小的一部分。但是不管怎样,我们目前采取的市场营销策略似乎效果不错,并且我们也没有在上面花太多钱。
我觉得我还没来得及问你呢解码器问题。那么,只要谈到您的营销支出,公司的结构是怎样的?
我们有一些职能部门。包括市场营销、工程、产品管理以及设计等部门。每个职能部门都有一个负责人。为了让你有一个相对的概念,我们的员工构成大概是这样的:工程、产品管理和设计这三个部门加起来占了我们大约70%的员工。对于我们公司来说,设计部门的人数有些偏多。我们总共有850名员工,但设计部门就有约130人。所以虽然设计部门人数很多,不过总体上工程、产品和设计三个部门加起来占据了大约70%的比例。
那些是负责该产品的人。如果你看一下那个团队,它被划分为不同的领域,每个领域都与我们试图优化的一个方面相关。例如,在语言学习方面,我们主要尝试优化的三个方面是:参与度,即杜利奥格如何有趣;更好地教授内容;以及我们赚取的收入。对于每一个方面,我们都设有一个专门的领域。然后,在每个领域内,有团队存在,而在每个团队内部,则有人负责具体工作。这是一种矩阵结构。
对我们来说,我认为非常有效的一个重要做法——虽然这并不容易做到——是我们没有以功能为基础的部门或团队。我的意思是说,大多数软件或应用公司通常会为每个功能设置一个团队。例如,这是一个负责登录功能的团队;如果有一个排行榜,则会有专门负责这个排行榜的团队。而我们不是这样做的。我们的团队不拥有特定的功能,而是拥有指标。所以我们有负责订阅收入的团队、负责每日活跃用户的团队等,并且他们可以对应用中的任何部分进行调整。他们的任务就是不断优化这些指标。这样做有利也有弊:优点是它与指标紧密相关;缺点是没有哪个团队会对某个具体功能负责。当出现问题时,会有很多人说:“这不是我管的功能,我不清楚。”尽管如此,这种做法总体上对我们来说效果非常好。
这听起来,一是对在谷歌工作的一种反应,在谷歌团队负责诸如登录界面之类的事情,并且他们无休止地交流如何改变登录方式。但这也似乎适用于一个小公司,在这样的公司里一个人可以全面了解整个产品及其所有功能以及它们是如何协同工作的。然后你会不可避免地遇到冲突,因为两个人试图从不同的角度通过提高不同的指标来修改同一个东西。你该如何解决这些冲突呢?
肯定会有冲突。这里有一些帮助我们的事情。其中之一是,每次对应用的修改都需要通过一个称为产品审查的过程,这不仅仅是一个人的事。有一群人拥有整个系统运作的知识。他们起到了一定的信号量的作用,就像在说:“不,你不应该这样做。”
另一个非常重要的是我们有防护指标。这是如何运作的:如果你是负责提高订阅收入团队的一员,你的目标就是改善这个指标。但我们告诉你,“你不能破坏其他任何指标。” 例如,如果你进行了一项实验,这项实验可以将订阅收入提高了100万美元或更多,但同时却降低了每日活跃用户数,那么你就不能推出它。这真的帮助了各个团队自我监管。他们至少不会去做那些会严重破坏其他方面的事情。这两者的结合已经很有帮助了。
你说得对,如果我们有100,000名员工,我认为这样的结构是行不通的。不过话说回来,我觉得像杜洛宁这样的公司,至少在我们现有的产品线来看,并不需要100,000名员工。我认为我们会继续发展和成长。也许我们会达到大约5,000名员工的规模,但我不认为我们会达到100,000名员工的程度。
这些碰撞事件有多少次会真正影响到你?你又有多少次不得不做出权衡?
不是经常。团队自我管理得很多。我会看到每一个通过应用的变化。我确实会看到这些,但通常不会做出权衡的决定。我主要关注的是确保一切高质量。
在节目一开始,你因为我叫你是联合创始人而开玩笑说创始人模式,那是布莱恩·切斯基。参加了节目他谈了很多关于如何重构爱彼迎的事情。他是那个管弦乐队的指挥。这已经得到了它应有的关注。
你是否觉得自己适合这样的角色,即能够纵观整个应用程序,理解所有这些权衡是如何做出的那个人?
没错,这是真的。好消息是我们的员工会待很长时间,而且我们在产品领域的领导层在过去八年里一直保持不变。我对所有事情都有了解,但实际情况是,我们的产品经理塞姆(Cem Kansu)也对所有事情有了解。我们的设计主管瑞安(Ryan Sims)几乎也是如此。虽然我现在处于这个模式中,但我们有一群人可以胜任这一角色。
当你们三个人意见不一致时,你们如何解决分歧?
好消息是几乎没有分歧,这有几个原因。首先,我们是一家非常依赖数据指标的公司,所以通常情况下,我们会让数据说话。如果我们进行A/B测试,数据表明了某种结果,除非我认为这是某种暗模式或其他类似问题,否则我的意见并不重要。一般来说,我的意见或他们的意见都不太重要。这是原因之一。另一个原因是,我们一起工作了很长时间,因此在很多事情上已经非常一致了。最后一点,我有一个说法,“如果我们靠观点来做决定的话,就听从我的”。通常,在有分歧时,我会看看他们对自己观点的信念有多深,有时即使不同意也会支持他们的意见。但如果我们在某件事上的信念强度相同,那么我就会坚持自己的看法。
这可能是我听到过的最简洁的创始人模式定义。
什么是——那种“如果我们非要采取某个观点,那就采用我的”?
“just do what I say”确实是创始人模式的答案。
但大多数事情其实并不依赖于意见。大多数事情都是基于数据的。
所以这里还有另一部分解码器这个问题是一个很好的基础。你是如何做决定的?你的决策框架是什么?
对公司来说还是对我来说?它们相似但不完全相同。
有些人认为他们没有什么不同,而有些人则认为他们非常不同,所以你可以按自己的想法回答。
对公司来说,决策很大程度上与投资回报率相关。对于大多数事情,都会进行投资回报率的计算。即使我们没有坐下来写下具体的数字,也会考虑你为某件事付出的努力以及你能得到多少回报。这驱动了我们的大部分决策。还有一件不是多邻国独有的事情,但在我看来在大多数公司里并不是常态:通常,当你做一个项目时,有三件重要的事要考虑:它要花多少钱?;你要多快完成它?;以及它的质量如何?一般来说,在这三个方面之间存在取舍关系。在多邻国,最重要的是质量,其次是速度,最后才是是否符合预算。而在许多公司里情况则相反,最重要的通常是预算,然后是速度,最后才是质量。在这里,质量是最重要的一点。所以这也是我们决策的一个组成部分。
那是公司的决定。对我来说,更多的是凭直觉来做决定,过去我总是试图为这些直觉寻找合理的解释。我现在已经不再那么做了,因为我意识到,“看,我认为我们应该这样做。事后我可以告诉你们一些理由,但事实是,我的直觉告诉我应该这么做。”因为在杜鲁林工作了13年,我的直觉相当准确。当然不是百分之百正确,我也犯错,但它通常很靠谱。我主要是根据直觉来做决定,然后才去告诉别人原因。但是周围的人都知道这些解释是在事后的合理化,并非最初的理性思考。
这显然对私营公司的创业创始人有效。你已经一家上市公司担任首席执行官已经超过三年。作为一家上市公司的首席执行官,这对你来说有效吗?
是的,因为大多数我们需要做出的决定都有一个明确的答案。就像说,“好吧,这会让我们亏钱。我们不要做这件事。”
但是你是否必须改变你的沟通方式?我从几位将公司上市的首席执行官那里听到过这种情况,现在他们需要按照季度报告的时间表行事,并且要面对投资者。Elliott投资管理公司可能会突然出现在你的门前,对你们没有更多地向说中文的人群进行营销感到不满。你现在负责一家上市公司,是否已经改变了这种态度?
不,我们非常幸运。首先,在上市之前我们就聘请了一位出色的首席财务官马特·斯卡鲁帕,他很幸运地处理了大部分上市公司的事情。我很少参与这些事务,对此我很感激,因为我没有金融背景。我拥有计算机科学博士学位,擅长的是这个领域,而不是金融。所以这是非常幸运的。
到目前为止,作为一家上市公司,我们很幸运的是执行得很好。我认为这给了我们在某种程度上的回旋余地,因为我们表现得非常好,所以不会有人问我们一些棘手的问题。我肯定这种情况不会永远持续下去。我确信在某个时候我们会错过一个季度的目标。迄今为止我们还没有这样做过,但我肯定迟早会发生的。当这种情况发生时,我可能不得不回答一些问题,并且可能需要告诉人们:“对不起,从现在起我们将更加谨慎。”但到目前为止,我在收益电话会议上穿着T恤衫。当你看到我穿正装出现在收益电话会议上的那一天,你就会知道我们出问题了。
是时候离开了。
[笑]“哦,真对不起。”
我从上市公司首席执行官那里听到的另一件事与你强调质量第一有关。你们有很多指标,这意味着你的投资者可以看到很多不同的指标或以不同方式要求这些指标。但质量是无法这样衡量的,对吧?
不是。
至少在当前的市场环境下,如果你对投资者说,“我们将投入大量资金用于人工智能,并认为在这个应用场景中,它将对我们非常成功或者我们可以因此提高收费,但是我们需要前期投入大量资金并且需要等待一段时间才能看到成效。”这样的说法并不会让投资者感到兴奋。你是如何管理这种情况的?
你说得对,质量是无法量化的。我们做出相关决定的方式是,在我们的设计部门里,有一些人对质量有着极高的要求。我们会说,“不行,这还不够好。”这种情况经常发生。
就投资而言,说实话,我们对于公开市场上的事情谈论不多。我们讨论的是指标。我们不会过多地谈论因为不喜欢猫头鹰的动画效果而多花了一个月时间来开发这个功能的事情。我认为这样是没问题的。但我猜测如果我们参加财报电话会议时把所有的时间都用来谈论我们在猫头鹰动画上投入了多少努力,我不认为人们会喜欢这样的内容。
我认为更多的公司应该花更多的时间讨论他们在改进产品质量上花了多少时间。我认为这将是美国资本主义的一个重要升级。
我想是这样的。但确实,我们在某些事情上花费了太多时间。如果你看看我们的应用,随着时间的推移,它变得非常动画化。我们花了很多时间来仔细检查每一个动画帧。“看,这还不够流畅。”我并不声称我们的应用程序是完美的,但我们至少努力让它尽可能接近完美。
另一个似乎难以衡量的因素,或者可能会引导你走向不同方向的指标是:Duolingo的成功程度。也许最重要的指标是:人们是否在学习西班牙语方面取得了进步?他们是否具备了用西班牙语交流的能力?他们不仅掌握了这门语言,还能实际运用它进行沟通吗?你能测量到这一点吗?
是的,我们能做到,但可能没有你期望的那么有效。所以答案是肯定的,Duolingo 确实有用。我们有数据支持这一点。我来告诉你我们是如何衡量它效果的。不幸的是,这是目前我们知道的有效可靠的方法。虽然这种方法并不完美,但它确实可行:首先,找一个刚开始使用 Duolingo 的人,向他们提问一系列有关之前语言知识的问题,并且给他们进行一次测试以了解他们的初始水平。然后让他们长时间使用 Duolingo,因为学习一门新语言需要一定的时间。你可以让他们使用一年或两年时间。之后,在这个时间段的结束时,再询问他们是否使用了其他资源,并对他们再次进行测试来评估他们在该期间的进步情况。结果表明,那些之前完全没有相关知识的人在只使用 Duolingo 并不依赖其他学习资料的情况下所取得的学习成果,与课堂环境中学生的学习效果相当或更好。虽然具体数据会因研究的不同而有所差异,但我们对此感到非常满意。这些结果显示出来的效果是切实可行的。
这种测量方法的问题在于它非常慢。我们需要一到两年才能获得新的测量结果,我真的不喜欢这样。尽管我们已经尝试过,但我们还没有想出更好的方法。我们在应用程序中做过一些事情,比如“好,我们可以测量你是否学到了这个词”。这样做超级复杂,并且从未给出很好的结果。所以我们只能依赖传统的“前测、后测”方法。就是这样。
这就是你转向参与关于教育的漫长的社会级辩论的地方,讨论我们如何衡量学校和教师的表现。你觉得你在参与这个系统吗?你是在使用他们的标准吗?这是学校的做法。他们会测试你。
我们使用他们的测量标准,效率真的非常重要。我们花费大量精力确保我们的有效性。另一个好消息是,尽管时间尺度是以年来计算的,但你可以绘制Duolingo的有效性图表。如果你回顾过去10年,每年它的效果都比上一年更有效。
这是一项基于考试的衡量标准。通过考试的人更多了?
是的,越来越多的人在测试中取得了更高的分数。基本上,每年在Duolingo上学习的人都在学到更多东西。这是因为我们努力更好地教授这些内容。这一点毫无疑问。
到这个时候,当我们进行比较时,我们知道我们至少不逊于课堂环境,甚至可能更好。但我们还达不到优秀一对一人类辅导教师的水平。我们的目标是在未来三到五年内达到这一点:在效果上与一对一的人类辅导老师一样好。但在让你持续使用这方面,我们做得比人类辅导老师要好得多。然而,在效果方面,如果你有足够的金钱和毅力继续下去,一对一的人类辅导老师会更胜一筹。
你认为游戏化和参与度(这些是你历史上擅长的事情)与教育之间存在冲突吗?
是的,有的。
你如何处理那个冲突?
非常简单。始终以互动为主。
真的吗?
是的。
我的意思是,想必你已经听过了双方的观点。为什么你会做出这个决定?
我会给你很多论点,但最有效的一个是:不管你多么有效,你无法教导一个不在那里的学生。
这就完了?
就这样。人们离开了。实际情况是,参与度和学习成果并不总是相互矛盾的。但是当它们确实存在冲突时,我们通常更倾向于选择提高参与度。举个例子来说,有些事情令人感到沮丧,而沮丧会让你离开。实际上我们会尽量让这些过程变得顺畅一些。我的意思是说,如果我能强迫你一直坐在那里,也许我可以在五分钟内教会你所有内容,但这会是一个非常令人沮丧的五分钟。相反,我们选择用两个小时来教你——虽然速度慢得多,但整个过程中屏幕上都在生动地展示内容,你会不断地获得满足感或类似的体验。即使一个非常好的老师能够在五分钟内教给你这些知识,在观看你犯错误的过程中这也会很让人感到沮丧。相比之下,我们更愿意让你留下来。
部分原因是我们在应用程序环境中而不是在学校环境中。在学校环境中,事实是孩子们被强制留在那里。他们不能离开。在应用程序环境中,即使是微小的挫败感,人们也会说:“你知道吗?我现在要去刷 TikTok 了。”我们不能失去这些用户。所以我们总是选择保持用户的参与度,但这并不意味着我们不会教你所需的内容。我们只会稍微慢一点教授。
很明显你对此思考了很多。
我们花了多年时间思考这个问题。
我想把这个内容再展开一些,因为你有一个非常明确的答案和观点。你认为游戏化与教育之间的具体矛盾是什么?当你总是选择游戏化时,你会失去什么?
可能你失去的是效率——我的意思是,单位时间内学到的内容量。实际情况是,我小时候是在发展中国家长大的。当时有些老师在教我们的时候会打我们。我没有开玩笑,他们会打我。实际上,我学得非常快,因为在练习写字时,如果你做错了,他们就会用尺子打你。你会有很强的动力尽快完成任务。所以你会学得很快,因为你心想:“天啊”。因此我认为确实如此:在一个迫使你快速学习的环境中,即使你不感到愉快也没关系,你可以学得更快。但在我们的情况下,只要你们仍然保持参与度,我宁愿稍微慢一点的学习速度。
效率,我懂这个。在我上学的时候也有一些要求很严格的老师,但我真的很擅长考试。我和我的妻子一起上了大学。她比我聪明得多。
但你是一名好的测试者。
她总是生我的气,因为我只需要在最后出现参加考试就能过关。这可能是多年来她不愿意和我交往的原因,因为这种核心的挫败感。这就是我说的教育。那个人类老师可以评估你是否擅长应试,还是真正学到了东西。我所说的权衡就是,如果一切都变成游戏化参与,人们可能会学会玩游戏,而没有学到任何实质性的东西。
这可能有一点。当然,很难衡量。但事实是,最终它有效果。Duolingo确实有用。比如说,我过去几年一直在使用Duolingo学习法语。到目前为止,我可以不看字幕直接观看法语的Netflix节目。我只是看着它们,这就说明它是有效的。所以你说得对,可能需要权衡取舍。这可能很难衡量,但我们这里要寻找的是人们是否真正有效地利用了他们的时间。
我想把所有这些主题和想法结合起来。你对Duolingo有一个宏伟的愿景,你已经谈论了很多次了。你的目标是向全世界各地的人提供语言教学服务,并进入多个国家。同时你还是一家上市公司,需要赚钱。你们团队仍然穿着T恤上班。首先浮现在我脑海里的事情是,你们正在推出新的产品如数学和音乐课程,但这些新功能在Android系统上还不可用,这全球最受欢迎的操作系统这被世界上大多数低收入人群使用。但感觉上有一种立即的矛盾,即Duolingo最好的体验是在财富更充裕的人群使用的平台上。你如何解决这种矛盾?
这是一个很好的观点。首先,数学和音乐即将在Android上推出,或者到节目播出时它们就已经可以使用了。将在Android上提供我们在Android上的开发大约落后一年。这种情况在Duolingo几乎从一开始就是这样了。Android版本相对于iOS版本滞后了半年到一年的时间。造成这种状况的原因有很多,但最大的原因可能是找到真正优秀的Android开发者比找到iOS开发者更难。市场上优秀的iOS开发者更多,所以我们杜洛林有更多的iOS开发者。
我们工作的方式是,在iOS上对大多数新功能进行试验。因为一个新的功能一开始通常不是很好,你通常需要通过试错来尝试改进它。等到它变得足够好了,我们会将其移植到Android平台上。这就是我们的运作方式。
我们理解Android的重要性。你说得对。使用Android手机的人比使用iPhone的人多。通常,所有功能都会在大约六个月后出现在Android平台上,对此我们感到可以接受。此外,由于多个原因(而不仅仅是开发者数量更多),在iOS上进行开发更容易。所以就是这样,我们在很多方面都领先。
回首过去,鉴于当今的技术,也许我们应该做的是跨平台开发,在所有平台上同时进行开发,但我们被限制在两端都必须原生应用。我们为iPhone有一个原生应用程序,也为Android手机有一个原生应用程序。十年前这是最好的选择,但现在我们却被束缚住了。
当你考虑公司发展时,支持多个平台就意味着一直要付出双倍的努力。你有没有想过,“好吧,我们要有意放慢开发进度,以便保持这个团队规模较小”?
它就是这样,我们并没有一个大规模的项目会让我们暂停所有开发然后说,“你知道吗?我们现在要变成单一平台的那种模式。”但我们在慢慢朝着这个方向前进。我不知道这需要多长时间。困难之处在于,如果我们现在从头开始,决定会很明确,但是你也必须让现有的项目继续运行。做这件事的投资如此巨大,我们可能不得不停止所有开发一年半左右的时间。我甚至不知道时间表是什么样子的,因为这件事情实在太大了。到目前为止,我们决定采取分阶段的方式来做这个事情,而不是一次性全部搞定。
您的高级订阅层级,最高层级,刚刚登陆Android平台。
实际上就在前几天。
自从现代智能手机诞生以来,我一遍又一遍地听到的一件事是iOS用户花费更多钱.
是的,四倍之多。至少对于Duolingo而言,每个用户的人均花费是四倍之多。
所以你的大部分收入来自iOS用户,这是我从这得出的结论。
是的。我们从iOS获得的钱比从Android多,即使我们的Android用户数量多于iOS用户。只是很难克服那个四倍的差距。
他们的收入是四倍吗?还是说,从人口统计学上看,iOS用户在你的应用上花费的钱是四倍?
不,收入是四倍。也就是说用户花费的钱是原来的四倍。我们有更多的安卓用户,但最终不会平衡出来。我们从iPhone上赚更多的钱。我在这里给你一个数字,只是为了让你有个概念。用户的分布是60/40,即60%的安卓用户和40%的iOS用户。而收入则恰恰相反。基本上是60%来自iOS,40%来自Android。这些是非常粗略的估计。
所以当你考虑扩展时,再次提醒,如果你是一家上市公司,大多数用户使用的是Android系统,而Android是世界上最大的操作系统,但你所有的收入都来自iOS,你怎么解决这种矛盾呢?
我们是不是要在iOS系统上赚钱而不是在Android系统上赚钱?我们的主要任务是为所有其他用户提供免费的语言教育,那么iOS用户是否在补贴这个免费的任务?
我说的是,这是看待这个问题的一种方式。并不是说我们所有的资金都投在了iOS上,而是说更多资金来源是iOS用户,这一点毫无疑问。但无论是在Android还是在iOS平台上,目前为Duolingo付费的人通常是那些经济条件较好的人。他们可能不是百万富翁,但他们生活在像美国这样的富裕国家,在这些国家里有年薪10万美元的工作岗位。拥有稳定工作的富裕国家的居民就是支付Duolingo费用的人群。而免费使用Duolingo的用户通常来自贫困国家。由于这些用户可能没有稳定的工作,所以确实是由富有阶层资助了所有人的教育。这种情况一直如此,并且将来也可能一直这样下去。
现在,我们也需要作为一个企业做得更好,以使一些发展中国家的人们愿意付费。一个很好的例子是,Netflix 在巴西和印度取得了很好的成绩,让更多人愿意付费。我们在这方面做得不够好,其中部分问题在于我们提供的是免费增值模式。再说一次,我是在一个贫穷的国家长大的。即使价格已经根据人均GDP进行了调整,并且变得更便宜了,但是在贫穷国家的问题是,“除非必要,否则不会付费。”这就是态度。无论是否只需要一美元,只要我不必付钱,我就不会付。
你所看到的是对广告的极度容忍。例如,我们可以在一节课结束时放置10个广告,但他们仍然不会付费。这就是为什么比如Netflix在这些国家表现很好的原因,因为Netflix没有免费版本。他们就是说,“看吧,不管怎样,你们必须付费。”而人们则会说,“好吧,我来付。”所以我们需要弄清楚作为一款免费增值产品在这类国家该怎么做,并且我们有一些想法,但事实是我们在像印度这样的国家还没有实现强有力的盈利模式。
你认为这是否是你在思考英语教育时下一步合乎逻辑的发展方向?
当然,我们在这件事上投入了大量精力。它正在增长,这很好,但这是一个巨大的机会。语言学习是一个有趣的现象,在一个像美国这样的富裕国家里市场最大。但是整体的语言学习市场实际上是在发展中国家:印度、越南、巴西和墨西哥等国。他们在学习英语,这是最大的语言学习市场,但我们还没有攻克这个市场。我们已经解决了较小的市场问题,即美国、西欧和其他较富裕的国家,在这些地方我们在盈利和用户数量上都取得了成功。我们在印度有很多用户,但他们并不付费。
我觉得我必须得问你关于猫头鹰的事。对我来说,询问关于猫头鹰的事情对每个人都很重要。至少在这个国家里,猫头鹰是一个非常在线的、文化特征鲜明的角色如果你把这只猫头鹰带出美国的社会媒体网络,并放在其他任何地方,它都不会有意义。这只猫头鹰在不同的市场是否具有文化上的表现差异,还是说它只是同一只猫头鹰?
我不知道该怎么回答这个问题。它介于两者之间。我们之前就开始用猫头鹰作为社交媒体账号了。它主要在美国通过TikTok发展起来,因为这只猫头鹰在TikTok上做了一些很疯狂的事情。
等一下。_the 字母似乎缺少了后续内容,根据提供的信息只能翻译到这里,剩余部分如果补充完整了,请告知以便继续翻译。若无更多内容则按要求输出原文: Wait, hold on. The猫头鹰不起作用。编写和表演猫头鹰节目的团队有多大?
五个人。
好的。他们是在杜洛林戈工作吗?
是的。
我假设他们在美国纽约市?
实际上,并不是这样。大多数都在匹兹堡。
好吧。我没有意识到匹兹堡有这么多的人总是在线。祝你好运。
是的。但一开始的时候使用TikTok这主要发生在美国。那是几年前的事了。这段时间发生的变化是,首先,我们不再仅仅依赖TikTok。现在它已经在YouTube, YouTube短片功能(直译为“YouTube Shorts”,这是一个专门用于制作和分享短视频的内容形式), Instagram等等。所以它在社交媒体上随处可见。这是一个很大的特点。另一个特点是,我们学会了将其本地化到不同的市场。所以我们为很多国家开设了Duolingo账户:墨西哥——好吧,说西班牙语 — 日本, 巴西, 德国, 法国, 中国等等。我们已经找到了让所有这些事情成功的方法。一开始有人告诉我我们要在德国开设一个账户时,我持怀疑态度。无意冒犯德国人,但我想“这些人没有幽默感。”
天啊。
但事实证明——
他们这样做。
他们确实如此!事实上,这是我们比较成功的账户之一。[国际账户]有些不同。并没有太大差别,但还是有点不一样。
这些人都是当地人吗?
不,我们有一个全球团队,就是这五个人,在每个国家我们有一两个人来本地化这些内容。“本地化”并不意味着我们会用完全相同的视频,在墨西哥加一顶 sombrero。不是这样的。我们有主题,并且已经确定了哪些主题在全球范围内有效,以及在某些国家哪些主题有效。例如,德国的案例中,我们有一个非常重要的东西在十月 fest(注:此处保持原词,因为“Octoberfest”通常指的是慕尼黑的啤酒节,直译为“十月初次”,但常用意为“啤酒节”,在中国常保留原词使用)此外,在某一时刻,因为存在这个舞厅场景在柏林,我想他们全都去了那些24小时的舞厅之一。每个国家都做了不同的事情,效果还不错。
成为Duolingo猫头鹰作家的招聘过程是怎样的?你是通过查看人们的推特账户来说“你够疯狂到可以做这个工作”吗?
到现在为止,这种情况已经很多了,因为我们在线上的存在感很强。顺便说一下,我最近才知道,我们每周在TikTok上发布的视频有时会成为当周全网观看次数最多的视频。这种事情会发生。到目前为止,我们的账号已经非常有名了,因此我们在招聘时有更多选择,很多人想要加入这个团队。通常情况下,我们会看看他们的过往作品。这是一个由真正优秀的创作者组成的小组,所以我们从这些人中挑选。一般来说,这些人都很有趣,在网上更是如此,但当他们离线的时候就没那么搞笑。他们还是很有趣的,但是当你见到他们本人时,你会想,“原来是你?就是你创造了那个东西?”
你把一切都量化的样子。这有效吗?因为猫头鹰你们获得了许多新用户吗? 注意:这里的“owl”原文直译为“猫头鹰”,但根据上下文可能是品牌、活动或特定元素的代称,如果特指某个具体事物,请提供更多信息以便更准确翻译。如果没有特殊含义,则保持直译。
是的,这行得通。顺便说一下,这不是付费的。所有这些社交媒体营销都是免费的。我们制作视频,它们就会广泛传播。大约15%的用户是通过社交媒体来的。现在,如果你看看我们的内容在社交媒体上的观看量(以数十亿计),你会发现我们的内容和社会上关于但不是由我们制作的内容的观看次数大致相等。此外,还有很多其他人只是在制作关于Duolingo的内容,但他们不是我们,他们的总观看次数与我们差不多。
你有没有告诉团队要放慢进度?你有没有看过他们制作的东西后说,“我们不能这么做”?
嗯。这是我们的一篇评论。有一个审批流程。我们在一些发布的内容上接近界限,实际上我们也越过了界限发布了不应该发布的东西。自从那以后,我们现在有了一个相当严格的审批流程。这是一个完整的审核层,最后一步基本上就是我了但东西不会经常送到我这里,因为在我前面还有其他人,比如首席营销官,所以有很多步骤。
CMO上次是什么样子的,说“我不知道,这个得卢伊斯批准”?
我在试着回想那是什么。
他们让你去做什么最后一件事,尽管你当时持怀疑态度?
我不记得确切的视频是什么,但它是我批准的最后一部视频,我当时判断错了,也就是说,我本不应该批准它。很多时候你只能在事后才知道这些情况。直到发布了视频并看到人们的反应后,你才会知道问题所在。我已经不记得当时的内容了,但我知道我批准了它,并且后来意识到我是错的,因为我没有预见到会有那样的反应。我们还没有出现过很多失误,大概只有三四个视频是这样的:“你大概不应该那样做.”
另一件事发生在大约一年前。我们制作了一个疯狂的视频。那真是太疯狂了。我们对此有点犹豫,最后还是把它剪掉了。网上有很多关于猫头鹰真的很想让你学习一门语言的梗图,甚至包括绑架你的家人这种极端行为。这个视频就是关于绑架的内容,我们对此有些迟疑,然后10月7日发生了袭击事件,所以我们决定剪掉它。去年我们就已经把这段视频剪掉了,并且当时我们认为“嗯,谁知道呢?明年或许可以使用它。”今年又来了,我们再次把它剪掉了。然后我们内部得出一个结论:如果我们某一年能够播放那个视频的话,那可能对人类来说是好年景。
嗯。
嗯。我们可能永远不会玩那个了。
那个世界的背景需要大幅改进,我认为。好吧,我得用一个功能请求来结束。你已经给了我们很多时间,现在我让你们离开。我们谈了很多关于印度的内容。我们也谈了很多关于新兴语言的话题。可以添加古吉拉特语在这个应用里?
哦,天啊。
这是像婴儿一样我能理解和说的语言,但我不会读写它,我很希望能完成这个闭环。
你问的是语言。这很难。
它是一个巨大的语言体系。
我知道,我知道。
它是甘地和现任印度总理的母语。
不幸的是,成为一门庞大的语言和人们想要学习这门语言之间存在很大的差距。就印度语言而言,可能希里尼语(原文应为印地语)是最受人渴望学习的,但实际上只有很少的人在学它。据我所知,不到1%的学习者在学习希里尼语(注:此处应指印地语),我猜测可能是0.1%的学习者在学这门语言。这就是添加新语言困难的地方,在于我们必须维护这些语言,并且必须做得很好,但最终使用的人却很少。所以,对此表示遗憾。
好的。那是一次明确的拒绝。这是第一次有首席执行官明确拒绝我。这又是创始人模式。
好吧,这确实很难答应。在过去,我经常会同意这类事情,我们在添加语言方面犯了很多错误,事后看来,我们本不应该添加那些语言的。
你曾经削减过语言吗?
我们有。我们砍掉了什么?我想是南非语。部分原因是因为需求非常小。最主要的原因是这门课程质量很低,到了某个时候,我们认为这对品牌风险比其他任何事情都要大。我们在想是否可以改进它,最后决定不值得去改进。
你认为AI会帮助你增加语言能力吗?
也许,但不幸的是,目前AI在处理大语种方面非常擅长,在处理小语种方面则表现不佳。我们提供的语言与这一情况有很高的相关性。AI对西班牙语和法语等语言表现出色,但对于像世界语或纳瓦霍语这样的小语种则不是那么擅长。
AI在数学方面表现很差,至少目前的大型语言模型在数学上表现得很差。它们会在这方面帮助你吗?
好消息是,在我们现有的限制环境中,它能提供很大的帮助。它已经提供了很大的帮助。我们为数学课程生成的许多数据都是通过人工智能完成的。另外一点是,有些数据不是通过人工智能生成的,但结果表明,计算机在处理数学方面非常擅长。
有趣的是我这么多次问这个问题,却没有人提到有台计算机这件事。很高兴你提到了这一点。
计算机擅长数学!我知道人工智能可能不那么善于遵循某种模式。它可能在这方面不太擅长。但我们为数学课程生成的数据包含很多像分数和乘法之类的内容。计算机相当擅长生成这类数据。
好的。路易斯,你给了我们很多时间。非常感谢你来到这里解码器.
感谢邀请我。很棒的问题。
尼拉伊·帕特尔的解码器 /
来自The Verge的一个关于大想法和其他问题的播客。