英语轻松读发新版了,欢迎下载、更新

我将DeepSeek vs Meta ai Llama vs Qwen放在我的PC上本地测试 - 这是我推荐的

2025-02-21 06:30:00 英文原文

作者:Nigel PowellSocial Links NavigationTech Journalist

Logos of DeepSeek Qwen 2.5 MetaAI
(图片来源:Shutterstock)

AI巨人喜欢谷歌,,,,Openai可能会抓住所有的头条新闻,但在幕后是一个同样动荡且迅速扩展的生态系统。

可以在家庭计算机上运行的小型和专业人工智能模型的市场正在发烧,这是由于对个人和业务应用的需求似乎无限。

两年前通过Meta的开源推出骆驼模型并通过释放被点燃DeepSeek R1今年,这个自制的AI领域看起来正处于不可阻挡的轨迹上。

这些本地型号不仅更便宜,更私密,而且事实证明它们很容易以任何目的的方式自定义。

但是它们真的那么有用,还是只是一厢情愿的思考?我认为可能值得看看三个主要的假装来看看他们提供的东西。

DeepSeek

DeepSeek R1 illustrations

(图片来源:PEXELS / FLUX / NPOWELL)

可以公平地说,没有比这种冲击中国产品所做的更多模型来加速当地的AI部门。免费,开源且功能强大,它是任何人都希望尝试使用新的AI应用程序的理想工具。

其爆炸性成功的主要原因有两个。首先,它可以使用极度适中的硬件运行,尤其是在较小的版本中。其次,它可以轻松地用于训练其他模型,以在称为AI蒸馏的过程中生产强大的AI模型混合体。

我目前最喜欢的是DeepSeek R1 Distill Llama 8B,该8B的尺寸为5.3 GB,足够小,可以在我的台式PC上运行,但提供了良好的性能,可以应对大多数日常任务。我目前的最爱是DeepSeek R1 Distill Llama 8b,尺寸为5.3 GB的小足够小,可以在我的桌面PC上运行,但提供了良好的性能范围,可以应对大多数日常任务。

这范围从基本聊天搜索,例如我如何从棉质T恤上清除污渍,处理税收查询或其他个人问题。因为它在我的计算机上本地运行,并且不需要互联网连接,所以我可以放心我的隐私,这很好。

QWEN

另一个不错的选择是QWEN型号。

我目前有三个版本的

QWEN 2.5

在我的PC上,特别是7B,14B和32B型号。只有最小的确实以可接受的速度运行,但是有时我会使用其他功能更强大的版本,如果我感觉足够耐心地等待响应。还有一个整洁的编码版本,该版本提供了免费的代码生成,用于创建小型简单的应用程序和实用程序。

骆驼

(图片来源:npowell/flux)

Llama 3.2 image created using AI

开创性的美洲驼已被证明是一种适合各种用途的强大,可靠且非常灵活的模型。

它仍然特别强大的一个领域是视觉。

所以我跑了骆驼3.2 vision扫描文档和破译图像。这听起来很愚蠢,但是使用此模型有数百种甚至数千个应用程序,从扫描汽车板到放射学。

我也有一个自定义调谐版本的骆驼3我喜欢使用一般知识。每个问题似乎始终如一地提供更详细和准确的回答。

要注意的点

关于使用本地型号有几件事要注意。第一个是新的几乎总是更好。人工智能开发正在以高速进步,即使六个月也可能意味着质量和性能的巨大差异。

同样重要的是要了解本地模型的使用意味着您不可避免地会遭受较小的上下文窗口的折磨 - 除非您的计算机有相当多的数量内存和功能强大的图形卡。

这可以限制它们对更复杂的任务的有用性,但随着技术的成熟,也正在缓慢变化。

底线

Programmer sitting at a laptop and monitors

(图片来源:Shutterstock)

现在,市场上有大量的开源模型,因此每个人都应该有一些东西。

一个很好的起点是在开源模型目录上进行搜索拥抱脸。大多数模型可以安装并从霍拉马lmstudio应用程序。

汤姆指南的更多信息

与您的每周新闻通讯相关,总结您需要知道的所有最大的AI新闻。另外,我们的AI编辑器分析以及有关如何使用最新AI工具的提示!

奈杰尔·鲍威尔(NigelâPowell)是技术行业拥有30多年经验的作家,专栏作家和顾问。他在《星期日泰晤士报》报纸上制作了每周的《不恐慌技术》栏,已有16年了,并且是《星期日泰晤士报》计算机答案的作者,由哈珀·柯林斯(Harper Collins)出版。他一直是Sky Television的全球乡村计划的技术专家,也是BBC Radio Five Men's Hour的定期贡献者。

他拥有法律荣誉学位(LLB)和工商管理硕士学位(MBA),他的工作使他成为所有事物软件,AI,安全,隐私,移动和其他技术创新的专家。住在西伦敦,喜欢花时间冥想和听音乐。

关于《我将DeepSeek vs Meta ai Llama vs Qwen放在我的PC上本地测试 - 这是我推荐的》的评论


暂无评论

发表评论

摘要

在家庭计算机上运行的小型专业AI模型的市场由于对个人和业务应用的需求很高,因此蓬勃发展。在今年Meta的Llama模型和DeepSeek R1的释放驱动下,这些本地模型因其负担能力,隐私和定制潜力而受到赞扬。其中值得注意的是DeepSeek R1 Distill Llama 8B在日常任务中的多功能性以及用于代码生成和应用程序创建的QWEN范围。开创性的美洲驼在与视觉相关的任务(如文档扫描和图像解密)中特别强大。但是,用户应意识到,由于硬件限制,本地模型可能对上下文窗口大小有局限性。

相关讨论