OS Copilot评测报告

简介: 本文测评OS Copilot在云资源运维管理中的表现,基于阿里云ECS环境。该工具通过-t、-f和管道功能,将AI集成到运维场景中,简化了部分工作流程并提升了效率。特别是-t参数能自动执行命令并生成报告,但存在推理过程不透明、命令执行无记录等安全隐患。此外,文档对新手不够友好,复杂任务执行缺乏明确指引,输出结果冗长且不直观,影响用户体验。整体而言,虽有创新但需进一步优化以提升安全性和易用性。

本测评仅代表个人观点,无任何利益倾向

我是一位开发工程师/独立开发者,我平时的工作涉及云资源的运维和管理。
根据使用文档,我顺利的使用了使用了OS Copilot的-t / -f / 管道功能。
三个参数都很好的实现了它本身介绍的功能。提供了一种全新的运维体验。
将最先进的AI给集成进了运维场景中。一定程度上的简化了运维工作,提升了效率。
虽然有一些比较遗憾的地方,但是也是一次AI落地的新探索。

评测环境:

服务器:阿里云ECS
OS: Alibaba Cloud Linux

成功安装并创建RAM角色并授权

image 2.png

评测流程

配置OS Copilot阶段

  1. RAM控制台等术语,整个过程中没有对其进行简单解释。对于小白不友好。
    特别是在配置认证信息步骤中,不容易理解。不过还是能根据步骤进行配置。
    image.png

  2. 创建角色步骤,图片过小,容易忽略需要选择阿里云服务
    image 1.png

参数 -t:

不使用-t参数,运行co 当前系统健康度

仅给出了常见的查询命令和建议
后续识别到了这些命令,且提供了选择交互,但是执行出错了
image 3.png
image 4.png
image 5.png

使用-t参数,运行co 当前系统健康度 -t

image 6.png

对比:

  1. 使用-t参数,copilot进行了思维链的思考,并自动的执行了思考结果中含有的命令。
  2. 有结果总结输出,告知基本的系统健康度。

优点:

  1. 自动调用了agent执行,省去了多次人工输入,交互上更加的便利。
  2. 有输出一份汇总的报告。

缺点:

  1. 【轻微】案例的问题指代不明确,”系统健康度”涵盖的范围很广,不仅仅包含结果中的维度。也没有对用户进行询问,询问我具体需要查看哪些信息。实际使用过程中,并不会查询这么笼统的信息。
  2. 【严重】推理过程没有展示,例如模型推理过程中输出
    image 7.png
    并没有展示具体会执行哪些命令。一切命令有AI自动生成并执行。
    但是对于一个陌生的新工具来说,至少对于我个人来说,我感觉这个行为不可接受。
    用户不知道AI到底真实的执行了哪些命令,对系统是否会带来损害。
    且执行的命令没有被系统记录到history。
    如果发生意外,无法追踪。
    能理解功能的本意是好的,也大概率不会出现这种情况。
    但是从安全的角度出发,这种执行的行为是不能接受的。特别是root权限下。
    image 8.png
    3.【轻微】ai推理过程中出现了中英文间杂的情况。
    image 9.png
    4.【中等】展示的结果并不直观,而且是纯文字。对于习惯了这些命令输出的人来说,不能马上获取到想要的信息,需要适应一下。
    image 10.png
    5.【严重】没有提供原始数据,以及提供进一步查询某一个具体指标
    对于一个新的工具而言,通常情况下对于AI的执行结果,就个人而言不会全信,毕竟AI本身的机制决定了它有可能胡说八道。因此提供命令的原始输出来供人为校验是很有必要的。
    并且当一个服务器中有很多服务时,通常执行出来的都是瞬时的结果,过后再使用命令去查询可能结果又不一样了。
    个人使用是无所谓,但是没有向外提供的时候,就没有原始的数据提供支撑。特别是现在大家对AI的认知不同,认同度也不同。如果对方质疑结论,根本没有办法提供有效证据来证明。
    且回答结束后没有提供进一步查询的交互,比如发现了异常后,很有可能下一步就要找出占用很高的具体是哪个线程。还有可能需要观察这个线程一段时间内的资源占用变化。

参数 -f:

优点

  1. 对于简单命令执行的效果还是不错,并且有提供选项供用户选择。
    image 11.png

缺点

  1. 【严重】示例展示了使用方法。但是没有对复杂任务做具体限制和说明。
    比如具体可以执行哪些任务。
    现在的说明就容易让人误解成文件中的内容可以随便写,copilot都能执行。
    就容易出现下面的情况。
    从示例中看,要想让copilot执行复杂任务,在task文件里其实需要把任务描述的很详细,
    提供很多必要信息给到copilot才行。
    但是说明中没有明确的提醒,就容易出现用户随便写一个任务,缺失了很多必要信息,
    copilot执行不了的问题。
    且同样的问题,推理完就自动执行了内容,没有经过用户的确认,直接就抛出异常。
    用户根本不知道服务器被执行了什么命令。
    image 12.png
    image 13.png
    2.【轻微】示例不贴切,示例很好的展现了copilot执行复杂任务的能力。但是实际场景下不会在服务器上去现写python脚本,并执行未知内容的python脚本。数据也不会放在文件中。

参数 | :

优点

  1. “|”功能是有效的,确实把上一步命令的内容都传递给了copilot。省去了很多输入时间。

缺点

  1. 直接复制体验流程中的命令运行出错,且弹出了英文回复
    image 14.png

  2. 已经要执行往下执行了,还是弹出了“ How may I assist you this time? 您可以使用中文或英文与我进行沟通。”
    且后续的执行隔了一两秒才出现,一开始让人以为又执行失败了。
    image 15.png

  3. 后续对每个参数都进行了解释,特别冗长,输出了很久。且都是英文。
    并且对参数如何设置,设置成什么值会有什么效果,进行了假想,其实用户不需要这些内容。
    image 16.png

  4. 体验流程中的指导不够接地气。
    没有好的展示出如何在现实场景去使用。只能靠猜。
    按示例去模拟测试一个docker -h | co。
    参数非常多,copilot输出了非常的多的内容,光阅读就非常长的时间。
    且输出很啰嗦没有重点。使用的心智负担很重。
    image 17.png
    image 18.png

  5. copilot自行进行联想,联想了一些非本次目标的内容,导致输出更加冗长。且会自行执行一些内容,不受控制。
    image 19.png
    image 20.png

相关文章
|
3天前
|
弹性计算 运维 数据安全/隐私保护
OS Copilot测评
作为一名个人开发者,我在ECS实例中部署个人服务时顺利使用了OS Copilot的-t/-f/管道功能。该工具对非资深运维人员非常友好,极大提升了命令行操作效率,减少了查阅资料的时间。但在安装和使用过程中遇到了一些问题,如权限配置、-t参数执行多余操作、-f参数重复确认等,建议优化用户体验并完善文档说明。
|
4天前
|
人工智能 运维 监控
操作系统智能助手OS Copilot新功能测评
本文介绍了操作系统智能助手OS Copilot的新功能测评。作为一名运维工程师,作者分享了安装过程中遇到的小问题及解决方法,并详细描述了使用体验。OS Copilot在回答速度、命令执行和任务处理方面表现一般,但提供了便捷的自动化操作,适合新手学习。作者指出其优点包括深度定制化、简化重复工作和对新手友好;不足之处在于回答不够流畅、汉化程度低且智能化水平有待提高。整体评分6分,未来有提升空间。
|
4天前
|
运维 弹性计算 Ubuntu
操作系统智能助手OS Copilot体验测评
作为一名高校云资源运维管理人员,我在使用OS Copilot时遇到了一些问题并找到解决办法。主要问题包括:1. **Access Key错误**:需为RAM账号授权;2. **-t参数部分结果缺失**:某些命令执行不成功会自动替换;3. **-t参数有时无效**:如测试网络连接时无差异;4. **-f参数方便二次调用**:可将任务保存至文件并自动安装依赖工具包;5. **管道操作权限问题**:可能需要额外权限。建议简化授权流程,减少Access Key和Secret的复杂性。
45 13
操作系统智能助手OS Copilot体验测评
|
1天前
|
前端开发 Java Linux
一个简单项目部署带你认识OS Copilot
我是一名学生开发者,专注于云资源的运维和管理。本文通过一个简单的项目部署介绍OS Copilot,阿里云基于大模型构建的操作系统智能助手。项目使用了阿里Ant Design、React、Spring等技术栈,部署在Alibaba Cloud Linux上,涵盖前端Nginx服务器配置、Java后端打包与运行、MySQL安装等内容。OS Copilot支持自然语言问答、命令执行、系统调优,极大简化了Linux系统的操作,适合初学者快速上手。
25 2
一个简单项目部署带你认识OS Copilot
|
4天前
|
安全 开发者
阿里OS Copilot新功能测评
作为一名个人开发者,我测试了OS Copilot的-t/-f/管道功能,尽管任务执行失败,但整体体验不错。安装过程简单,智能体操作便捷但存在安全风险。参数帮助详细却冗长,建议简化并增加总结和示例。对于危险操作,阿里云的安全提示值得肯定,但仍需丰富文案和提供用户教育内容。期待未来改进与突破!
|
5天前
|
弹性计算 运维 数据可视化
OS Copilot安装与多项功能测评报告
OS Copilot安装与多项功能测评报告
54 15
|
1天前
|
弹性计算 运维 自然语言处理
操作系统智能助手OS Copilot新功能测评
一文带你了解操作系统智能助手OS Copilot的三大新功能
43 10
|
5天前
|
人工智能 运维 Java
阿里云OS Copilot使用心得
作为一名后端开发工程师,我最近尝试了阿里云的Linux智能助手OS Copilot。安装过程简单,但需确保服务器内存充足(至少600M空闲)。使用RAM用户设置ACCESS_KEY时遇到问题,最终用主账号KEY解决。单命令模式体验良好,能快速生成Java服务启动脚本等。Copilot在Linux系统管理、网络配置和Shell脚本编写方面表现出色,极大提升了工作效率。虽然担心AI对运维工作的影响,但目前看来更多是助力而非替代。
39 6
|
1天前
|
前端开发 Java Linux
一个简单项目部署带你认识OS Copilot
本文介绍了一个简单项目部署的过程,带你认识OS Copilot。通过阿里云的OS Copilot智能助手,简化了Linux系统下的项目部署流程。项目包括前端和后端两部分,利用OS Copilot实现了Nginx服务器安装、前端打包上传、Java环境配置、MySQL数据库安装等操作,并通过Copilot提供的命令快速入门和交互模式,提升了运维效率。完整过程展示了如何借助OS Copilot高效完成项目部署,适合初级程序员学习参考。[博客跳转链接](https://www.blog.ubanillx.cn/一个简单项目部署带你认识os-copilot/)。
20 1
|
2月前
|
安全 Linux 数据安全/隐私保护
Vanilla OS:下一代安全 Linux 发行版
【10月更文挑战第30天】
72 0
Vanilla OS:下一代安全 Linux 发行版