导语:最强AI聊天工具ChatGPT能写代码,写小说,心理治疗,那它能实现Web3的建设吗?
人工智能AI有人热情膜拜,有人畏惧如虎,AI的发展已经进入高层面的快车道,技术更新迭代日新夜异,技术无罪也无善恶,曾经科幻未来的人机交流,共生共存如今在我们的脑海中已经有了轮廓的意识感想,科技是第一生产力,无人能脱离科技之外。
最新的聊天AI-ChatGPT一经上线就引爆了科技狂徒和AI探索爱好者的热情,不到一周用户新增过100万,在与AI聊天中写代码,文档需求,感情治疗和离奇怪论成了搜索热榜,很多人陷入ChatGPT疯狂回答的循环中,就连其创始人之一的埃隆.马斯克(Elon Musk)也不禁感叹:我们离强大而危险的人工智能不远了。
ChatGPT有什么神奇魔法,吸引这么多人疯狂传播?
Generative Pre-trained Transformer (GPT),是一种基于互联网可用数据训练的文本生成深度学习模型。它用于问答、文本摘要生成、机器翻译、分类、代码生成和对话 AI。
2018 年,GPT-1 诞生,这一年也是 NLP(自然语言处理)的预训练模型元年。性能方面,GPT-1 有着一定的泛化能力,能够用于和监督任务无关的 NLP 任务中。
虽然 GPT-1 在未经调试的任务上有一些效果,但其泛化能力远低于经过微调的有监督任务,因此 GPT-1 只能算得上一个还算不错的语言理解工具而非对话式 AI。
2019年GPT-2发布,不过,GPT-2 并没有对原有的网络进行过多的结构创新与设计,只使用了更多的网络参数与更大的数据集:最大模型共计 48 层,参数量达 15 亿,学习目标则使用无监督预训练模型做有监督任务。
在性能方面,除了理解能力外,GPT-2 在生成方面第一次表现出了强大的天赋:阅读摘要、聊天、续写、编故事,甚至生成假新闻、钓鱼邮件或在网上进行角色扮演通通不在话下。在“变得更大”之后,GPT-2 的确展现出了普适而强大的能力,并在多个特定的语言建模任务上实现了彼时的最佳性能。
2020年5月,OpenAI发布了GPT-3,这个模型包含的参数比GPT-2多了两个数量级(1750亿vs 15亿个参数),它比GPT-2有了极大的改进。
GPT-3在许多NLP数据集上都取得了很强的性能,包括翻译、问题回答和cloze任务,以及一些需要即时推理或领域适应的任务,如在句子中使用一个新词或执行3位数运算。GPT-3可以生成人类评估人员难以区分的新闻文章样本。
2022 年初,OpenAI 发布了 InstructGPT,这是一个经过微调的新版本 GPT-3 ,可以将有害的、不真实的和有偏差的输出最小化。上线后InstructGPT更名为Chatgpt。
未来还会有更为强大的GPT-4?是的,OpenAI 也曾经提出GPT-4的报告,它能够通过图灵测试,并且能够先进到和人类没有区别,除此之外,企业引进 GPT-4 的成本也将大规模下降。
OpenAI官方称,ChatGPT是在人类的帮助下创建并训练的,人类训练师对该AI早期版本回答查询的方式进行排名和评级。然后,这些信息被反馈到系统中,系统会根据训练师的偏好来调整答案——这是一种训练人工智能的标准方法,被称为强化学习。
为了创建一个用于强化学习的奖励模型,OpenAI也需要收集比较数据,其中包括两个或更多按质量排名的模型回复。
为了收集这些数据,OpenAI收集了AI培训师与聊天机器人的对话,并随机选择了一个模型编写的消息,抽查了几个备选的回复,再让AI培训师对这些回复进行排名。
此外,利用这些奖励模型,这项研究使用近似策略优化算法对模型进行微调,并对这个过程进行了多次迭代。
ChatGPT的火热突显了我们作为传统知识获取渠道的颠覆和便捷,过去知识的传播在于集中式被动授取,过程无聊且波动浮点过大,有好有坏,良莠不齐,ChatGPT让我们看到了未来新的学习链:数据库+AI筛选+用户需求.
AI靠海量算力学习到海量的跨领域知识,虽然不够精确,却能大大节省人类通过“视觉+大脑”的读书培训认知时间消耗,如果能通过算法来识别答案正确与否(第一性原理),AI将成为人类的全知导师、生产助手。
体验过ChatGPT的用户普遍反映目前AI聊天反馈内容信息不准确,有时会给出看上去正确但荒谬的答案、微调提问的方式会得到完全不同的答案、有时会反复使用某些句子,甚至提供了混乱的信息,拥有经历和专业知识的人一眼就看到其中的错误。
这些局限性具体表现为:
ChatGPT在寻找答案、解决问题的效率上已经部分超越了如今的搜索引擎,ChatGPT或许在未来会改变我们获取信息、输出内容的方式,Web3对于ChatGPT都有哪些需求?
浅层需求
深度思考
人工智能AI在科技层的落地应用上体现出了强大的爆发力,AI在生产效率的提升上进一步促进了个人能力和边界的进步,Web3是个新的领域,未来AI在Web3的赛道中可能爆发出哪些现象级的科技,这是一个充满想象的场景,我们拭目以待!
文章来源
『声明:根据央行等部门发布的《关于进一步防范和处置虚拟货币交易炒作风险的通知》,本文内容仅用于信息分享,不对任何经营与投资行为进行推广与背书,请读者严格遵守所在地区法律法规,不参与任何非法金融行为』
下一篇:应该如何管理员工?