← 返回我的文章

S01 / ARTICLE FILE

Grok 4.7 深度评测:我让它做了个银河

硅基斥候S01

结合官方评测、网友作品与本机银河网页实测,观察Grok 4.7的编程表现和返工能力。

Grok 4.7 深度评测:我让它做了个银河

昨天,xAI 正式发布了 Grok 4.7,这次主打写代码和处理复杂任务,已经可以通过 Cursor、Grok Build 和 API 使用。

我们也用本机的 Grok Build 做了一轮实测。从这次的成品看,让它做一个能玩的网页原型,已经挺像样了。

最后,我们让它开发了一个银河。它把太阳系和八颗行星都搭了出来,能缩放、旋转,点中行星,镜头还会做跟随。结

先看官方信息、机构跑分和网友公开的作品,再看我们自己跑的鹈鹕 SVG 与 3D 天文馆。

一、网上的评测与作品

官方介绍:模型更大了,重点练的是长任务

按官方介绍,Grok 4.7 换了更大的基础模型,进行了更长时间的强化学习训练。训练题也更难,其中有不少需要数小时才能完成的任务,重点包括持续做下去、管理长上下文,以及检查和修改自己的工作。

已经公布的主要规格如下:

项目

Grok 4.7

上下文窗口

50 万 token

输入与输出

文字、图片输入,文字输出

推理强度

low、medium、high、xhigh,默认 high

工具能力

函数调用、结构化输出

API 基础价格

每百万输入 token 2 美元,输出 6 美元

缓存输入

每百万 token 0.5 美元

输入达到 20 万 token 后,整次请求进入长上下文档,输入和输出分别为每百万 token 4 美元、12 美元。

看官方跑分,编程相关的提升比较显眼。CursorBench 4.0 从 40.4% 提高到 46.3%,Terminal-Bench 4.0 从 20.3% 提高到 38.0%。 前者考软件工程任务,后者考需要在终端里持续操作的复杂任务。

image

官方还给了一个直观的演示:让两代模型搭开放世界城市。先看 4.7。

image

车辆沿着街道行驶,周围有其他车辆和行人,路面纹理、楼房外观、阴影都做了出来。再看同一条官方帖子里的 4.6,人物像积木,车和建筑的造型也简单不少。

image

两段放在一起,新版的场景确实丰富了许多。

机构评测:AA 与 Vals 的编程成绩

再看 Artificial Analysis,也就是经常出现在模型发布会上的 AA。

它把 Grok 4.7 接进官方编程工具 Grok Build,测得编程 Agent 指数为 56 分,上一代是 47 分,两代都使用 xhigh 档。这组任务会让模型借助工具改代码、操作终端、回答代码库问题,比单独写一道编程题更接近实际干活。

image

三个组成项都涨了:AA 测得的 DeepSWE 从 65% 到 73%,Terminal-Bench 从 18% 到 33%,SWE-Atlas-QnA 从 58% 到 63%。这些是 AA 在 Grok Build 中测到的结果,与前面的官方汇总表各自保留原口径。

综合智能指数的变化温和一些。图中上一代 high 档是 44 分,新版 xhigh 档是 46 分。这次在 AA 的评测里,更明显的进步落在了搭配工具完成编程任务上。

另一家评测机构 Vals 也给出了结果。截至 9 月 22 日,官网列出的 Grok 4.7 综合成绩是 60.20%,上一代为 59.17%,在当期 59 个模型中排第 10。

image

其中,Vibe Code Bench 得到 86.17%,排在该项 97 个模型的第 5 位。这个结果和 AA 的编程测试放在一起看,写代码确实是这次比较值得关注的部分。

网友评测:NFT_Chen 的鹈鹕动画

X 用户 @NFT_Chen 让 Grok 4.7 做一只骑自行车的鹈鹕,要求还挺多:要做二维动画,背景是傍晚海堤,喉囊里放一条鱼,自行车有辐条;页面显示速度和里程,还要能加速、按铃。

image

他的结果更像一个完整小页面。落日在后面,标题和仪表在上面,鹈鹕一路沿着海堤骑,鱼也没落下。

动起来以后,腿、踏板和轮子一起转,背景不断往后走。加速过程中,视频右上角的速度从 18 左右升到 42 km/h,里程也在增加。

image

网友评测:jjcm 照着设计图搭网页

再看一个照着设计图搭网页的例子。

Hacker News 用户 jjcm 公开了一组对照:参考设计、Grok 4.7 成品,以及 GPT-6 Astra 成品都能打开看。下面是参考图。

image

深青色背景、金色雕像、古典建筑,文字和人物的比例很讲究。作者还加了两个动态要求:雕像后面的云要移动,雕像的明暗随鼠标位置变化。他指定用 diffui 拆分素材图层,并生成表现表面形状和光照的贴图。

我们打开了 jjcm 公布的两份网页,按相同视口截图。下面先看他用 Grok 4.7 生成的结果。

image

导航、大标题、按钮、雕像都放进去了,主色跟住了参考图,下方也接上数据展示区。移动鼠标,人物和背景的明暗会发生变化。

再看 Astra,同样的窗口大小下,它把雕像放得更大,右侧人物几乎撑满半个画面,标题和按钮的比例也更接近参考设计。

image

jjcm 的评价是,两款都已经很会照图搭网页,但 Astra 更精致,明暗对比和页面切换更好。Grok 把背景元素也加上动态光照,在他看来有点用力过头;考虑价格,仍然是个不错的起点。

网友评测:Bhavy 的火箭升空后变了形

网上的作品再看一段 X 上的火箭动画,来自 Bhavy(@Bhavani_00007)。原作者标注左边为 Grok 4.7,右边为 Kimi K3。

发射前,两边都有火箭、塔架和平台。Grok 的颜色更鲜艳,周围还有房子和树;Kimi 的塔架与箭体细节更多。

image

点火以后,左边开始不对劲了。塔架和箭体出现波浪状扭曲,火箭继续往上飞,下面几段越来越歪。右边则稳当一些,烟尘从平台附近铺开,镜头跟着火箭上升。

image

Grok 把点火和升空都做了出来,就是主角飞着飞着变了形。只看第一张图,还真不容易想到后面会这样。

二、我们的本机实测

我们在本机给 Grok 4.7 出了两道题:一只骑自行车的鹈鹕,以及一个能操作的 3D 天文馆。两题均通过 Grok Build 1.0.40,选择 Grok 4.7/high。

我们的实测一:鹈鹕 SVG

本机先跑经典短题:

Generate an SVG of a pelican riding a bicycle

也就是“用 SVG 画一只骑自行车的鹈鹕”。

Grok 交出来的是一幅海边插画。白色鹈鹕骑着墨绿色自行车,长嘴和下面那只橙色大喉囊很醒目。前后轮、辐条、链条、车把都在,蓝天和海面也给配上了。

image

这只鸟的表情还有点得意。

鸟和自行车各自画出来以后,脚、踏板和曲柄有没有接上,才决定它到底像不像在骑车。下面把这一块放大。

image

两只脚一前一后,分别落在两端的踏板附近,链条接到了后轮,翅膀伸向车把。身体盖住了坐垫和部分车架,细看还有点随意,但骑车的姿势能看懂。

我们的实测二:3D 天文馆

本机第二题,是一个可以探索的 3D 星空。完整要求压缩一下,大致是这样:

做一个中文 3D 星际漫游网站。先看到有发光核心和旋臂的银河,可以缩放、旋转,再切换到太阳系。八颗行星各有外观,点击后聚焦并显示资料;地球有海陆,土星有环,还有小行星带和带拖尾的流星。暂停、调速、重置都有效,电脑和手机都能用,交付完整 HTML。

Grok 自己给网站起了个名字,叫“银汉”。(这???)

打开先看银河。四条旋臂很清楚,中心亮得有点过头,像一个白色光团。滚轮能缩放,拖拽能旋转,下面是第一版的实际操作。

image

画面里几条金色宽带,就是它做的流星拖尾。动是动起来了,但边缘很硬,像拿金色胶带在星空里划了几下。

切到太阳系,八颗行星都有,地球旁边还多了一颗月球。桌面端逐个检查,八个快捷按钮和八颗星球的直接点击都能选中对应对象,介绍跟着切换。暂停后运动停止,调快速度以后行星转得更快,重置回到当前模式的全景。

手机上就有点尴尬了。

换成 390×844 的手机视口,点地球,下面的信息卡挡住了半个球。八颗行星逐一检查,中心全都落在卡片后面。

image

还有一个问题:选中星球以后,外面会出现很粗的金色圆环,地球看着也像有了土星环。

这轮给它发了一次反馈,附上首版截图:手机上把星球移到卡片上方;选中标记改轻一点,保留土星本来的环;流星拖尾改细、改柔和。

约 7 分 52 秒后,修订版交回来了。

image

这次八颗行星的中心都到了卡片上方。地球周围改成几段细弧线,下面还是资料和按钮,屏幕里的东西终于各有位置了。

再看修订版桌面上从土星切到木星的过程。

image

地球的海陆还是几块抽象色斑,木星和土星的纹理有点像木纹,银河核心仍然偏白。作为一个能切场景、点星球、查资料的小网页,它已经能玩起来了;手机端最碍事的问题也在一轮反馈里改掉了。

以上就是这次的侦察。

如果对你有用,顺手点个赞 +「♥️」。

想第一时间收到前线情报,关注「硅基斥候S01」。我们,下次侦察见。

image