「共学快闪第三期」一起搭建「微信机器人」活动 2024年6月24日
会议信息
会议主题:06-24 | 「共学快闪第三期」一起搭建「微信机器人」活动
会议时间:6月24号(周一) 19:55 - 22:20 (GMT+08)
智能纪要
智能纪要依据会中总结与录制内容生成,不代表平台立场,请谨慎甄别后使用
总结
会议讨论了如何让 AI 更像人以及虚拟人的发展方向与合规性问题。主要内容包括:
- 微信虚拟女友李若云的实现逻辑:讨论了微信虚拟女友李若云的实现逻辑,包括其背后的技术、设计思路以及皮皮老师的个人经历。
- 如何让 AI 更像真人:讨论了如何让 AI 更像真人,包括自我认知修正、记忆体、多模态实现、角色状态等方面。
- 关于如何让 AI 更像人的讨论:讨论了如何让 AI 更像人,包括拟人行为、剧本、多轮对话、响应延迟、表情包使用等方面。
- 如何实现一个智能聊天机器人,包括其技术架构和实现细节:会议讨论了如何实现一个智能聊天机器人,包括其技术架构和实现细节。
- 关于虚拟人项目的技术栈和实现问题:讨论了虚拟人项目的技术栈和实现问题,包括模型选择、记忆体管理、多模态判定、拟人化等方面。
- 虚拟人的发展方向与合规性问题
- 向量模型的精度与召回率问题:向量模型在本机精度差,在阿里云上调用后召回率不高,建议全部署在本机,使用最便宜的服务器做接口。
- 虚拟人的应用领域:虚拟人可以应用于陪伴、网红分身、智能处理等领域。
- 微信平台的合规性问题:在微信平台上,需要真人实名认证,且会通过判定账号是否为机器人等方式来检测合规性。
- 虚拟人的发展方向:个人判断虚拟人的发展方向包括老人和儿童的虚拟陪伴、网红分身、智能处理等。
- 关于 AI 研发的讨论
- 底层框架逻辑开源问题:有人建议将李罗云的底层框架逻辑全部开源,但赵悦认为难度较高,可能只有少数人能掌握。
- 平台搭建问题:赵悦提出了两个方案,一个是将李罗云的底层框架逻辑全部开源,再卖课;另一个是做一个平台,让大家可以托管自己的微信号。赵悦倾向于第二个方案。
- 与智能硬件结合问题:赵悦认为可以和小爱同学等智能硬件结合,但不知道大厂为什么没有这样做。
- 去重问题:赵悦提到了可以做去重,但没有详细说明具体方法。
- prompt 编写问题:赵悦分享了自己编写 prompt 的经验,认为 prompt 非常重要,并以图灵测试为例进行了说明。赵悦还分享了自己写的 prompt,并对其中的要点进行了详细解释。
- 如何提高大语言模型的拟人化程度
- 选择合适的模型:实测下来最强的拟人模型是 Mini Max AB 5.5S 和 5.5 本身,其他模型的表现相对较差。
- 设计合适的 prompt:prompt 的设计需要注意避免过长,可以通过截断策略和调整 system prompt 的位置来避免截断错误。
- 增加口语化要素:可以通过使用表情包、省略句尾标点、使用四川话等方式增加口语化要素。
- 避免大模型的过度服从:可以通过增加反感、愤怒、沮丧等情绪表达,以及调整召回策略和检测策略等方式避免大模型的过度服从。
- 如何设计一个基于聊天机器人的游戏
- 游戏规则和场景设定:游戏规则可以选择狼人杀、谁是卧底等有淘汰机制的游戏,也可以设计一个虚拟女友,通过好感度来评选胜者。场景设定需要考虑模型的理解能力和随机性,可以设计一个开放世界,让机器人自由聊天,也可以设计一个有游戏规则的世界,如大富翁。
- 模型能力和外部变量:为了避免机器人陷入死循环,需要引入外部变量,如通过搜索或工程角度给机器人一个随机数。同时,需要考虑机器人的理解能力,如是否需要先输入游戏规则。
- 游戏实现和奖金设置:可以将机器人放入微信群中,让它们自由聊天。也可以考虑让通义的同学提供奖金,奖励最终赢得虚拟女友芳心的人。
- 关于机器人的讨论
- 机器人的人设搭建:可以通过设置机器人的人设,让它们更加完整、有意思。可以利用图灵测试、AI 非诚勿扰等方式,让机器人在群聊中产生竞争效果。
- 机器人的群聊规则:可以通过限制轮数、设置评委等方式,让机器人在群聊中按顺序发言。可以将机器人拉到群聊中,让它们在群聊中产生更多的互动。
- 机器人的应用场景:可以利用机器人充当智能客服,解决一些痛点问题。可以使用知识库,让机器人更加专业、定制化。可以利用机器人进行更加人性化的交流,例如发送图片等。
- 关于虚拟聊天机器人的讨论
- 创建聊天机器人:可以在平台创建自己的 bot,并互相交流和沟通。新客户可以使用 COS 作为 API 来搭建。
- 举办 cost 活动:举办了 cost 活动,包括图文赛道和创意赛道,参与者可以将自己的作品投稿参赛,还有奖金。
- 评估指标和体系:提出了 helpfulness、拟人性、语言流畅度和优雅性、OC 等评估指标,并讨论了如何通过机评和人评混合的方式进行评估。同时,也提到了一些相对主观的指标,如后验的对话轮速、对话轮次、用户的使用留存和频率等。
- 问题汇总和整理:提供了一个问题汇总文档,记录了 119 条常见问题和解决方案,由张无一整理。建议大家在遇到问题时先查看汇总文档,如果没有找到答案再到群里提问。
- 微信机器人的搭建:微信机器人的搭建过程是一步一步的,可能会遇到一些卡点,最早的时候会有通信下老金、奥服等在群里面帮大家去做回复。所有的前两天的分享都在知识库首页上,通过第三轮 agent 供学,大家可以跟着教程搭建出一个还不错的机器人。
- 机器人的能力:机器人可以实现一些小的商业化目的,比如搭建客服机器人、进行群管理等。
- 课程相关:微信机器人的课程是全免费的,梦飞带大家完成的课程已经放在了知识库,大家可以扫码直达知识库进行学习。梦飞的课程干货满满,帮助大家避开了很多坑。
- prompt 的相关内容:prompt 属于商业机密,无法分享。赵悦给大家普及了一个知识,大模型的回复速度与输出的字符数据相关,只要输出字符数比较偏短,大模型的速度会很快。
- 其他内容:微信机器人的搭建教程已经比较全了,大家可以在 cos 里面尝试搭建,也可以投稿到 cost 的攻防里面去。
待办
智能章节
00:20 会议开场
会议开场
02:56 关于分享 PPT 等事宜的讨论
本章节主要讨论了会议的准备情况。AJ 表示皮皮老师将投放画面并展示精美的 PPT,赵悦确认是否需要开启摄像头,张梦飞询问 AAG 是否在群里推送,还提到要等主持人开场。此外,他们还提及摄像头有点糊,可能是手上有老油导致的。
04:48 一场关于微信云服务和平台搭建问题的分享与讨论
本章节主要讨论了微信云服务和平台的一些问题。王博闻提出微信机器人会掉线,张梦飞解释前七天不稳定,掉线频率与账号、个人和地区有关。王博闻还提到服务器崩了,张梦飞建议确认网址是否正确,并注意宝塔网址可能从 HTTP 变为 HTTPS。最后,赵悦开始投屏准备讲解。
08:51 微信虚拟女友的实现与挑战:从技术到思路的分享
本章节主要介绍了微信虚拟女友李睿云的相关内容,包括其基本信息、制作思路及相关技术问题。赵悦分享了如何让 AI 更像真人,提出修正模型自我认知、利用心理锚定效果等方法,并讲解了记忆体的分类和实现,还提到了伪多模态的实现方式及工程链路的相关问题。
23:33 中期记忆体、状态与角色剧本的生成及应用
本章节主要讨论了中期记忆体和角色状态的相关问题,介绍了通过大模型生成角色剧本,并基于剧本生成描述词来生成开发图,以及如何利用这些元素生成朋友圈的方法。同时,还解答了一些关于模型生成、人物一致性等问题。
28:02 虚拟人李睿云的实现原理、技术栈、现存问题及发展方向
本章节主要讨论了虚拟人的实现和发展方向。赵悦介绍了虚拟人的拟人行为,如反百度系统、延迟回复、一并回复等,并强调了独立人格的重要性。他还分享了虚拟人的技术栈和实现方式,包括 agent 概念解析、background agent、技术栈等。最后,赵悦提到了虚拟人的发展方向和合规性问题,并分享了自己的制作感受和联系方式。
01:15:32 关于大模型 chain 与 agent 的概念探讨及应用
本章节主要讨论了大模型 chain 的概念,即大模型执行一次任务的过程。多个 chain 可以串在一起形成一个 agent,每个 chain 背后可能都有一个系统的 prompt。章节中还提到了将小爱同学等智能硬件与嵌入式结合做陪伴小手的可能性,以及 COS1 的逻辑与传统 Lang chain 不同。
01:18:33 讨论李若云布号、烟花重构李若云及相关技术问题
本章节主要讨论了李若云的布置及体验问题。赵悦表示可重新布置李若云,需一个微信号且不用主号,因之前的技术实现不成熟,现重新写了智能处理烟花,效果会好很多,但未实际测试。此外,还提到烟花的技术实现难度比柳丽高很多,李睿云的技术革新需要等待。
01:21:12 关于拟人化 prompt 写作、大模型应用及游戏场景设想的讨论
本章节主要讨论了拟人化 prompt 的写法及相关应用。赵悦分享了 GPT4 图灵测试实验的结果,并指出心理锚定效果的重要性,同时强调在固定受限场景下,可通过写 prompt 来提升 AI 的表现。此外,还探讨了如何解决聊天过程中 token 消耗过多的问题,以及如何避免大模型出现机械回复或无法理解的情况。最后,大家讨论了机器人活动的游戏场景,包括狼人杀、谁是卧底等。
01:49:00 关于机器人共学、AI 非诚勿扰游戏的讨论以及知识库和 Faas BT 的介绍
本章节主要讨论了机器人的人设搭建和游戏玩法,包括如何让机器人在群里产生互动、设定目标,以及如何利用知识库让机器人更好地服务工作。此外,还提到了炸群问题的解决方法和 AI 奇葩说的游戏设想。
01:59:03 活动信息同步:人类群、日程安排、文档链接等
本章节主要介绍了活动相关信息,包括在 v to e GI 首页可找到活动,AI agent 智能体有 cos 和教程,日程及回放可在日程安排中查看,群里勿拉机器人,可找梦飞拉机器人群,还提到了皮皮老师做的咖喱、v 老师的直播、李若云相关内容及 cos 搭建工作流等,最后提到在 cos 里有 team,可创建 bot 并交流。
02:01:40 cos 活动介绍及相关问题讨论
本章节主要介绍了 code 举办的 cos 活动,该活动搭建方便,可作为 API 使用,完成搭建的虚拟男友、女友可投稿参加比赛,有奖金,图文赛道和创意赛道均可参与。此外,还提到了皮皮老师的课件和资料。最后,讨论了账号被封 7 天后能否解封及能否临时搭建让大家感受的问题。
02:03:27 bot 人设、回复内容限定及评估指标的讨论
本章节讨论了 bot 人设的重要性,赵悦认为追求回答准确性时 bot 人设不重要,但可以有回答语气;还探讨了拟人对大模型能力的影响,以及如何保证 system prompt 不被忽略;最后提到了拟人类 chatbot 的评估指标,包括拟人性、语言流畅度与优美性、OOC 等,且这些指标可通过人工或大模型打分。
02:12:36 张无一同学整理的知识库涵盖搭建问题及解决方式,共学活动历史信息可在知识库首页查看
本章节主要介绍了知识库的使用方法,强调了遇到问题可先在知识库中查找记录,若没有再去群里询问,还提到张无一同学整理的记录很详细,涵盖了所有问题及解决方式,最后介绍了知识库首页上的历史信息,包括前两轮共学活动和本周直播分享的回放。
02:15:27 微信机器人搭建教程及相关活动介绍
本章节主要介绍了机器人搭建的教程和后续活动。教程包括注册模型、配置云服务器环境、替换 Python 代码以及应用各种插件。后续活动中,最后一天将讲解本地登录的 hook 机制,并提到微信机器人的教程已较为全面。此外,还记录了机器人的大事件,鼓励大家发挥想象,带动对机器人的更多认知。
02:19:23 关于课程、知识库及共学活动的讨论
本章节主要介绍了如何进入飞书知识库,以及该知识库的作用和近期活动。此外,还提到了梦飞的课程全免费且干货满满,以及可以在 cos 里搭建机器人并投稿到 cos 工坊可能拿奖。同时,说明了接下来几天的飞书会议号是固定的。
02:21:03 赵悦分享大模型领域 Prompt 的商业机密及回复速度相关知识
本章节主要讨论了李云龙 imprompt 不能分享的原因,包括涉及商业机密和数量众多。此外,还普及了大模型回复速度与输出字符数相关的知识。最后,AJ 感谢了大家的分享,并表示会将回放放在链接中。