[ 云计算 | AWS ] ChatGPT 竞争对手 Claude 3 上线亚马逊云，实测表现超预期

ゞ浴缸里的玫瑰 2024-04-22 19:33 53阅读 0赞

![在这里插入图片描述][73f803739ca04eefb804ccda18780f38.png]

#### 文章目录 ####

*   *  一、前言
     *  二、Claude 3 介绍以及相关测试细节
     *  三、在亚马逊云科技上体验 Claude 3
     *   *  3.1 在 Amazon Bedrock 服务中配置 Claude 3
         *  3.2 为聊天配置使用 Claude 3 模型
         *  3.3 Caude 3 Sonet 聊天体验
     *  四、文末总结
     *  五、参考文献

### 一、前言 ###

3月4号，Anthropic 发布了号称现阶段宇宙最强大模型 Claude 3，到底强到什么程度，直接看这张图即可。

发文时间点 **Claude 3 Sonnet 模型现已在亚马逊云科技的 Amazon Bedrock 正式可用**，**本文第三节会介绍如何在亚马逊云科技上使用 Claude3 模型。**

![8dd264e9ce3b49ae910327be20eef324.png][]

### 二、Claude 3 介绍以及相关测试细节 ###

这次发布包括了三个版本：Claude 3 Haiku、Claude 3 Sonnet和Claude 3 Opus，它们的能力从低到高。

首先是Haiku，它是市场上速度最快、成本效益最高的选择，对于大部分的纯文本任务表现出色，同时也支持多模态能力。

Sonnet 则比之前的 Claude 2 和 Claude 2.1 快两倍，并且智能水平更高。它擅长处理需要快速响应的智能任务，比如知识检索或者销售自动化。它在智能和速度之间达到了完美平衡，这对企业应用来说尤为重要。

Opus 是最顶级、最强大的基础模型，具备深度推理、高级数学和编码能力，在高度复杂的任务上表现出色。它能够流畅地处理各种开放式提示和新颖场景，包括任务自动化、假设生成以及图表、图形和预测的分析。适用于需要高度智能和复杂任务处理的场景，比如企业自动化、复杂金融预测、研究和开发等。

Claude 3 Haiku、Claude 3 Sonnet和Claude 3 Opus的能力可以参考下面的图示：

![在这里插入图片描述][6bde87f97db84b5985efcadaa06b4901.png]

在相关测评中，Opus表现出色，多项基准测试中的得分都超过了GPT-4和Gemini 1.0 Ultra，在数学、编程、多语言理解、视觉等多个维度上树立了新的行业标准。特别是在特定测试场景下，如研究生水平考试Q题解A和数学Q题解决上，Claude 3的表现优于GPT-4。比如，在zero-shot学习环境下，Claude 3的准确率达到了60%，超过了GPT-4的52%。

在 Babel.cloud 开源评估项目的 LLMRGB 项目中，**Claude3 在单次测试中获得了高达97.6的高分**，大大超过了GPT-4，成为当前大型模型能力的领先者。

![在这里插入图片描述][79ee9238e5964ebda59db84199b47886.png]

(测试结果图片以及仓库见文末参考文献)

要特别注意的是，在 LLM-RGB 评估中，015\_simple\_mahjong 是个超级难题。简单地说，大型模型被教了一些简单的麻将规则，还给了一些例子，然后要求在一个具体情境下做出选择。**这个问题在以前的测试中很少有人能正确解答**。不过，**Claude 3 Opus** 有`20%`的几率给出最佳解答，还有`80%`的几率给出次优解。这意味着它的多轮推理能力远远超过其他模型，能够快速学习并应用有限的知识。这使得 Claude 3 的应用领域不仅限于简单的客服和文本生成，它在工程过程更长的领域也能表现出色。

### 三、在亚马逊云科技上体验 Claude 3 ###

#### 3.1 在 Amazon Bedrock 服务中配置 Claude 3 ####

目前，**Anthropic 的 Claude 3 Sonnet 模型现已在亚马逊云科技的 Amazon Bedrock 正式可用。目前可以完全免费试用**。

Amazon 上的体验服务入口：[https://portal.cloudassist-beta.sign-up.china.aws.a2z.com/demo/qrcode?trk=KOCKOL][https_portal.cloudassist-beta.sign-up.china.aws.a2z.com_demo_qrcode_trk_KOCKOL]

进入后无需注册账号，仅需要扫码进入 CloudAssist，然后点击限时试用即可，如下图

> 下一代 Claude (Claude 3) 的三个模型 Claude 3 Opus、Claude 3 Sonnet 和 Claude 3 Haiku 将陆续登陆 Amazon Bedrock。**Amazon Bedrock 是目前第一个也是唯一一个提供 Claude 3 Sonnet 的托管服务。**

![在这里插入图片描述][84d9c1fbbbd94f548ff6520905f703ee.png]

在 Amazon Bedrock 服务中，点击下面的入门按钮

![在这里插入图片描述][3df8352f9e98463d8bc58680059df416.png]

进入到 Amazon Bedrock 后，首先需要管理模型的访问权限，这后面需要申请所需的模型，在这个步骤直接点击 \[管理模型访问权限\] 按钮即可。

![在这里插入图片描述][d628ee4f08ea4ccd80ecfef5748c9753.png]

进入到模型列表页面后，可以看到 Amazon Bedrock 中内嵌了很多模型，不过这些模型默认没有配置访问，这需要你做访问请求，也就是继续点击配置模型访问权限操作。

![在这里插入图片描述][b60550f9468c41ceaaa9c2d2f169915b.png]

进入到模型请求访问权限页面后，可以看到 Anthropic 公司的模型，在做请求之前，需要先提交应用场景。如下图

![在这里插入图片描述][56b9d01912794852abfd642f6ded3040.png]

下面的信息是必填信息，需要填写后，按钮才会高亮，允许继续点击

![在这里插入图片描述][ad409196d7e144c49788ebee9140f553.png]

在上一步点击提交按钮后，勾选所需的模型，这里直接全选了所有模型做请求。

![在这里插入图片描述][53d914d728d240e3a19d8ecd38d790dc.png]

最后请求过程中可能需要等待几分钟。等待请求完成即可。

![在这里插入图片描述][866ff71a11bd43a594734a8390700657.png]

#### 3.2 为聊天配置使用 Claude 3 模型 ####

在上述步骤配置好后，在 Amazon Bedrock 页面，选择聊天菜单，之后点击【选择模型】按钮，选择 Claude 3 模型。

![在这里插入图片描述][5f4952747b404034adf2600a62dbac87.png]

进入到模型选择页面，选择 Anthropic 公司中的 Claude 3，点击应用即可。

![在这里插入图片描述][779bef0486a24e5288b19a253e3f21d4.png]

#### 3.3 Caude 3 Sonet 聊天体验 ####

第一个问题我是直接问他使用pyhon写一个3次的循环，可以看出 Caude 3 不局限一种方式书写，并且将多个实现写出，后面并且给出的测试打印结果。可以说你后面想问的或者拓展的很好。

![在这里插入图片描述][f573fec7aa504712ac51f666144a4d50.png]

接下来我使用 Claude 3 进行了一个图片识别，并且让 Claude 3 进行了分析总结， 传给 Claude 3 的图片是一张中国地图，并且带有一些描述信息。

可以看到最后 Claude 3 给的分析总结非常精准，精准到我有点吃惊。

![在这里插入图片描述][0a1eb6e3cdd54291893e962498160101.png]

对图片进行识别的测试，我上传了一只猫，可以看到 Claude 3 不仅分析了动物是什么，还直接描述了这个图片中猫的场景动作。

![在这里插入图片描述][2dd986d2879c4b22b7b077143f1cbc2d.png]

另外一个让我吃惊的是，我上传了一张车的图片，让他识别出来车的型号，Claude 3 可以几乎精准识别。问题以及 Claude 3 的回答可以看下图。

![在这里插入图片描述][984008ea62d9400aa16e7cfe27c58a04.png]

### 四、文末总结 ###

个人觉得，Claude 3 的超预期成功并不意味着 Anthropic 的能力已经完全超越了OpenAI。现在看 Claude 3 显然比 GPT4 更强大，但也许GPT-5 已经在 OpenAI 手中了。

然而，Claude 3 的出现表明大型模型领域不再由单一实体主导，也没有只有 OpenAI 才能创造的“核心魔法”。更多地涉及领先于工程能力和资源投入。大型基础模型之间的竞争为上层应用开发人员提供了更多选择，并将不可避免地带来更低的价格。从这个角度来看，无论 Claude 3 的成功被高估了多少，都带来了重要的行业价值和社会影响。

### 五、参考文献 ###

*  https://github.com/babelcloud/LLM-RGB
 *  https://llm-rgb.babel.run/view/testId/a581e4a9-ce1e-4b2f-8f45-980889913b58
 *  https://mp.weixin.qq.com/s?\_\_biz=MzA4ODMwMDcxMQ==&mid=2651122739&idx=1&sn=667fcc30565cb1ba6510307747fbf78e

[73f803739ca04eefb804ccda18780f38.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/599bc66c683644b4a6963b63765436dd.png
[8dd264e9ce3b49ae910327be20eef324.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/964c7bb8bc7741a894c1ca434b596943.png
[6bde87f97db84b5985efcadaa06b4901.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/cd63e020c88c473ea926adf5dc122e0c.png
[79ee9238e5964ebda59db84199b47886.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/dc956ed639ff488e97a39bb99aef3c2f.png
[https_portal.cloudassist-beta.sign-up.china.aws.a2z.com_demo_qrcode_trk_KOCKOL]: https://portal.cloudassist-beta.sign-up.china.aws.a2z.com/demo/qrcode?trk=KOCKOL
[84d9c1fbbbd94f548ff6520905f703ee.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/55c80ac3e46549ce94ed6ba3fc7bbad1.png
[3df8352f9e98463d8bc58680059df416.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/1cf37606a12c4583826ddb0c1f61530f.png
[d628ee4f08ea4ccd80ecfef5748c9753.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/6df2379c24374e3192f887ea6352aa03.png
[b60550f9468c41ceaaa9c2d2f169915b.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/27e06544c49a4ea4b88132e1d1c65e75.png
[56b9d01912794852abfd642f6ded3040.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/8ee8fd5fd45e4b97aa7928d1bbc931af.png
[ad409196d7e144c49788ebee9140f553.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/285905278a0a41b49911502d1d06cf05.png
[53d914d728d240e3a19d8ecd38d790dc.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/8170039dab944212a399b3d3a6241fbf.png
[866ff71a11bd43a594734a8390700657.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/c311d5ba10154407a4e491b83dd17a21.png
[5f4952747b404034adf2600a62dbac87.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/3b9ab236fd7943178d7e08997854f71a.png
[779bef0486a24e5288b19a253e3f21d4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/f9a3c2cbd36d4c7cbfc1cc1859b27fb1.png
[f573fec7aa504712ac51f666144a4d50.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/7148ad11726d4c1e960b0cb1878e02e6.png
[0a1eb6e3cdd54291893e962498160101.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/09aecec2a7034e7c8e2add560ba0fd9c.png
[2dd986d2879c4b22b7b077143f1cbc2d.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/230ee3e6251446bf90d35d30cfc8c9f9.png
[984008ea62d9400aa16e7cfe27c58a04.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/22/29f9bd7504a94ce2a439d204fd9fe33d.png