Optexity

Optexity是一个框架，旨在利用人类演示来训练基础模型，使其能够自动完成电脑上的任务，尤其是基于Web的任务。它允许你记录人类在浏览器中完成任务的操作，然后处理这些记录，用于训练AI智能体。未来，Optexity计划增加通过自我探索（强化学习）、软件文档和YouTube视频进行训练的功能。

核心功能：

• 录制演示： 记录人类执行web任务的演示过程。
• 处理演示： 将录制的演示数据进行处理，为模型训练做准备。
• 生成训练数据： 将处理后的演示数据转换成适合模型训练的格式。
• 模型训练： 使用准备好的数据训练基础模型（目前推荐使用 LLaMA-Factory）。
• 评估智能体： 训练完成后，评估智能体在特定web任务上的表现。

使用场景：

Optexity主要用于以下场景：

• Web自动化: 训练AI智能体自动完成重复性的Web任务，例如数据录入、表单填写、网页内容抓取等。
• 软件自动化: 训练AI智能体自动化执行软件操作，例如配置软件参数、生成报告等。
• 流程自动化: 针对特定的业务流程，训练AI智能体自动执行整个流程。
• 提高效率： 通过自动化任务，可以减少人工干预，提高工作效率。
• 降低错误率： AI智能体可以按照既定流程执行任务，减少人为错误。
• 无需编程的自动化: 任何人都可以通过演示操作，来训练AI，减少对专业编程人员的依赖。

简而言之，Optexity能让你像教小孩一样，通过演示教会AI如何使用电脑完成各种任务。