400 128 6709

行业新闻

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

发布时间:2024-03-18点击次数:

由10枚IOI金牌在手的创业团队Cognition AI开发的全球首个AI程序员智能体Devin,一发布就让科技圈坐立不安。

在演示中,Devin几乎已经可以独立完成许多需要普通程序员花费大量时间才能完成的任务,而且表现一点也不逊色于普通程序员。

但是,产品能力的边界在哪里,实际体验和演示时候有差距,还的看上手实测之后的效果。

这位斯坦福的小哥在Devin发布的第一时间就联系了团队,获得了第一手体验的资格。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

他让Devin帮它做了几个难度不一的项目,录制了一个视频,在推上写下了自己的使用感受。

下一个任务是让Devin做一个可以让普通用户直接与大模型下棋的网站。

需求复杂的编程任务还搞不定

用户每走一步棋,系统会将其转换成提示词传递给GPT-4,GPT-4会做出回应,这个回应再被转化为具体的下棋步骤展现在棋盘上。

按照小哥的要求,系统需要由相当多的部件组成。

他个人最为关注在这个系统的开发过程中,Devin能不能做到以下几点:

  1. 知道如何准确地使用GPT-4 API,因为大多数LLM实际上并不知道如何使用,并且API的调用存在版本冲突。
  2. 正确地请求API密钥并安全地处理。
  3. 处理包错误。
  4. 了解如何提示LLM下棋并能精确地返回提示词。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

令小哥想不到的是,Devin不仅要求小哥提供API密钥,而且在试用过程中还可以正确地保护它。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

不过,Devin目前反馈速度还相当慢,小哥推测是因为后台发生的代理提示远远比要看到的要多得多。

从小哥发起请求开始,它花了大约19分钟才询问API密钥。

小哥猜测,如果延迟是由于他们在后台运行大量提示造成的,那么延迟应该会随着时间的推移而加快。

因为他们以后可以访问专用GPU或与Claude或OpenAI合作降低延迟(估计是GPT-4或Claude Opus)。

Devin首先制定了一个规划。

在右上角,用户可以切换「跟随」状态,这样用户可以将屏幕自动移动到#Devin当前激活了的选项卡上。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

小哥没有打开跟随状态,因为他希望随时观察各个位置的变化。

规划器会随时保持针对当前任务的更新状态。

Shell看起来和普通的Shell没什么区别,但用起来真的很有趣!

Devin在工作过程中会打开多个shell,在shell的底部,用户可以拖动蓝色滑块来往前查看Devin编写的命令。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

下图是它当在尝试调试棋盘未渲染的内容。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

与此同时,小哥要求它再执行一个数据分析的任务。

小哥让Devin去「创建一张过去五十年南极洲海水温度的地图」。

对于这个请求,小哥觉得有两个方面可能很具有挑战性:

  1. 处理空间数据绘图/可视化。
  2. 知道在哪里下载数据,而且了解如何使用数据源,因为地理空间数据处理起来很麻烦。

Devin能像一个优秀的程序员一样聪明地阅读自述文件,并且还执行一些基本的EDA来理解数据结构。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

数据居然是一个ascii文件,小哥觉得有点奇怪。

小哥单击对话「调试Python脚本...」中的其中一个步骤时,它会打开与该步骤相关的代码库部分,因此可以跟踪某一个具体时间点发生的情况。

小哥比较担心的是,如果不是必须要询问API密钥,Devin似乎会不停地编码停不下来。

所以他试了试是否可以更改他之前提出的请求或指定其他内容,中断Devin的编码过程。

因为对于大部分用户在编码时,都有可能会改变主意或者有一些新的东西想要添加进系统之中,能够处理这种情况是很有必要的。

这是编码过程中的截图:

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

浏览器界面的呈现方式如下:

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

然后小哥又提了针对数据可视化的任务又提了一个要求,让系统将高温设置为蓝色,低温设置为红色。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

为了不中断编码的过程,似乎Devin又开启了一个工作线程来记录小哥的临时要求。

最终,Devin将APP部署到了Netlify上了,一个应用已经上线了。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

网页的链接:https://t.co/wTbtz2waDn

就像人类写的程序一样,第一个版本肯定是有Bug的。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

因为小哥要求的是南极洲的温度记录,似乎对于Devin来说它理解起来有些障碍。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

于是小哥把要求显示的位置改为了北美。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

总结

小哥没有给出Devin修改了Bug的结果,只是初步总结了用Devin开发的第一个网站的使用体验。

先说优点:

Devin产品化做得很好,他给人的使用体验是一个完整的产品而不是只是一个简单的对话框。

AI是系统最关键的部分,但支撑AI功能的产品化的结构是Devin的亮点。

Devin能够完成自动部署,API密钥保护,随时修改和添加需求等等非常好的各种功能。

产品的完成度已经非常高了,远远超过了一般的演示Demo。

再说缺点:

Devin的反应还很慢,当然小哥也说,因为他用的是1M的Starlink来上网,所以反应慢很有可能是他自己的原因。

其次就是还不能允许用户直接自己编辑代码,而且也没法协作完成。

当然,最初那个下棋的应用,难住了Devin,最终没有完成部署。而那个数据可视化的任务,似乎也有些Bug。

最终,小哥用Devin做了一个chrom插件,可以帮助用户把Github repo转化成Claude prompt。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

插件下载地址:https://t.co/k3l8jtwk7z

Machine Translation Machine Translation

聚合多个来源的AI翻译

Machine Translation 49 查看详情 Machine Translation

网友评价

网友看了这个实测之后还是感觉有点失望,毕竟这个任务一个初级程序员是能做到的,但是Devin的可视化项目的结果只做出了一个有Bug的网页。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

看样子Devin本质上还只是一个可以上网的大模型,现在要让他解决实际问题还有难度。

Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远

以上就是Devin第一手使用体验:完成度很高,开始编码就停不下来,但要替代程序员还很远的详细内容,更多请关注其它相关文章!


# 数据结构  # 铜山区软文推广招聘网站  # 天津seo优化厂家  # 新站关键词排名优化公司  # 服务行业营销推广电话怎么写  # 黄梅seo推广费用  # 自治区绩效办网站建设  # 关于网站建设工作总结  # 山东关键词排名优化学习  # 营销号各种推广方式  # php网站建设集团  # 是一个  # 自己的  # ai  # 南极洲  # 开源  # 的是  # 但要  # 很远  # 很高  # 小哥  # opus  # claude  # devin  # python脚本  # 程序员 


相关栏目: 【 行业新闻62819 】 【 科技资讯67470


相关推荐: 苹果头显降临,AI虚拟人的救星还是流星?  自己动手使用AI技术实现数字内容生产  OpenAI 向所有付费 API 用户开放 GPT-4  Unity 推出面向开发者的 AI 软件市场 AI Hub,股价飙涨 15%  七大主流AI企业包括OpenAI、谷歌等联合承诺:引入水印技术,并允许第三方审核AI内容  沐曦首款AI推理GPU亮相:INT8算力达160TOPS!  上海发布“元宇宙关键技术攻关行动方案”,加快 AIGC 等突破  AI 作画工具 Midjourney 推出“pan”功能,可平移扩展图片外场景  Midjourney 5.2震撼发布!原画生成3D场景,无限缩放无垠宇宙  IBM将模拟计算用于人工智能,重塑AI计算  跟着AI大热的“光模块”到底是什么?  美图设计室2.0什么时候上线  金山办公:AI是重要的产品战略之一  传Meta 2025年推出首款AR眼镜,采用军用级别材料,计划生产1000台  人工智能和神经网络有什么联系与区别?  智能技术提高现代商业运营的7七种方式  套娃不可取:研究人员证实用AI生成的结果训练AI将导致模型退化  人工智能快速发展 打开就业新空间  统信深度deepin成立 AI SIG 社区,共同提升 Linux 下 AI 体验  全新升级的广州麦当劳:面积最大餐厅正式引入智慧机器人  磐镭发布全新 GeForce RTX 4080 ARMOUR 显卡,售价为 9499 元  今年,全球客服中心支出将增长 16.2%,迎接对话式 AI 的浪潮,根据 Gartner 报告  学而思推出AI第一课:基于自研大模型的AIGC课程  世界人工智能大会机器人同台炫技!梳理A股相关业务营收占比超50%的个股名单  AI生成新闻网站数量激增,正在疯狂赚取广告收入  寻求能源转型最优解  华为昇腾AI原生支持30多种基础大模型,包括GPT  烟台大学学生首次在全国大学生无人机航拍竞赛中获奖  争鸣:OpenAI奥特曼、Hinton、杨立昆的AI观点到底有何不同?  AI绘画,还需要懂数学?  GPT-4使用混合大模型?研究证明MoE+指令调优确实让大模型性能超群  利用AI探索抗体“钥匙”、加速药物研发——访百图生科团队  人脸识别+全景双摄+AI算法 萤石推动智能锁行业革新  阿里云AI绘画创作大模型通义万相发布 已开启定向邀测  人工智能时代的科幻译者怎么办?“做好翻译工作的高端10%”|文化观察  看了天美对AI的布局,我感觉它想得是真明白  腾讯TRS之元学习与跨域推荐的工业实战  微软新出热乎论文:Transformer扩展到10亿token  世界人工智能大会|“AI领航,共筑未来”高端保险论坛成功举办  酒店业将如何受益于人工智能的改变?  PS AI修图免费平替来了!Stability AI又放大招,核弹级更新一键扩图  视觉中国宣布推出AI灵感绘图、画面扩展功能  找对了风口想不火都难,乐天派机器人,安卓机器人的最终形态?  2025VR&AR显示技术峰会展示歌尔光学最新一代光学模组  售价14.99万起!小米汽车部分信息疑遭AI曝光,内部人士回应:网传图片明显经过处理,不可轻信  消息称 ChatGPT 未来有望增加更多功能:上传文件分析信息,还能记住用户画像  张勇对话多位诺奖得主 人工智能将无处不在  衡水市冀州中学机器人社团在世界机器人大赛中斩获佳绩  一文读懂自动驾驶的激光雷达与视觉融合感知  视觉中国推出付费AI绘图功能:无版权可用 

400 128 6709
E-mail

contact@tlftec.cn

扫一扫,添加微信

©  云南淘乐房科技有限公司 版权所有  滇ICP备2025071560号  

云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司