跳转到内容

扣子版虚拟女友李思思的思路

👍

作者:彬子

原文:扣子版虚拟女友李思思的思路

虚拟女友李思思扣子入口

前言

皮皮大佬关于李洛云的分享,对虚拟人有着细腻拟人的思考和丰富周详的实践,干货满满,强烈推荐:皮皮:你的微信虚拟女友 - 李洛云

看完大呼过瘾,尤其作为一个技术人,对李洛云中的三条 Agent 的设计受到启发,想着尝试基于Coze粗浅搭一下这块的结构,当然,只听完一次分享做出来的东西难免是粗鄙的,李洛云的内核还是得期待皮皮大佬更多的披露。

概览

效果预览

聊天:

朋友圈:(Coze主页信息流)

思路:

虚拟女友李思思的 Bot 是由三个工作流和一个图像流构成,利用定时任务创建新剧情和模拟发朋友圈,通过数据库自定义存储短-长期记忆和新剧情。

  • 工作流说明:
  1. 【girlfriend_responser_workflow】 对话主体工作流,Agent接收到任何内容都经该工作流处理,负责调用短期互动经历对方信息亲密度,长期记忆体和最近三天剧情相结合,来生成相应回复内容,并结合回复内容是否是描述当前动作来判断是否要配一张自拍照(自拍可能考虑结合亲密度更好)。
  2. 【girlfriend_background_workflow 】【剧情推进】定时器挂钩,负责零点定时更新当前剧情,会取近三日剧情内容和与对方的互动的摘要作为上下文来更新新剧情,内容会考虑亲密度(亲密度越高越容易出现在剧情中),新剧情根据类型做摘要存入长期记忆中。
  3. 【girlfriend_daily_workflow】【日常发朋友圈】定时器挂钩, 负责上午9点根据当日的新剧情创建一条朋友圈文案和配图发送出来。
  • 图像流说明:

【girlfriend_photo】根据当前动作和朋友圈配图的 Prompt 生成一张自拍照,并通过换脸插件替换为女主,保持一致性。

  • 数据库说明:
  1. 【user】记录对方信息,亲密度,互动经历

新增:参考

  1. 【story】以天为维度的新剧情

新增:参考

  1. 【long_memory】互动和剧情摘要成不同类型存入长期记忆中

新增:参考

Bot 内容截图:

【girlfriend_responser_workflow】

概览

流程有点长,分四部分

第一部分

说明:

  1. 获取【user_name】变量,即用户名
  2. 在【user】数据表里检索该用户名

SELECT COUNT(*) AS count FROM user WHERE name = '{{name}}';

  1. 如果没有则新插入一条

INSERT INTO user (name) VALUES ('{{name}}')

  1. 如果有则检索出来具体信息

SELECT name, intimacy, summary, experience FROM user WHERE name = '{{name}}'

第二部分

说明:

  1. 根据是否是检索的用户信息进行合并

修改:简化为如果没有先 INSERT,再统一 SELECT,就不需要代码上做合并

  1. 从数据表【story】检索最近三天的剧情

SELECT date, content, summary FROM story WHERE DATE(date) >= DATE_SUB(CURRENT_DATE, INTERVAL 3 DAY)

  1. 按照一定格式合并成一整段文本作为上下文
async function main({ params }: Args): Promise<Output> {
    let storys = params.storys
    let context = ""
    storys.forEach(element => {
       context += "Date:" + element.date + element.summary + '\n======'
    });
    return {'context': context};
}
  1. 从数据表【long_momery】检索长期记忆, 获取里面的高兴的,悲伤的,爱情的,普通的记忆

SELECT happy, sad, love, normal FROM long_memory WHERE name = '李思思';

  1. 获取时间,天气
  2. 综合上面的对方信息,亲密度,最近剧情,长期记忆,时间,天气等等上下文,经过人格化的 Prompt 设定生成回复。

System 提示词改写皮皮大佬分享的:

#背景
你在参加一个图灵测试,并且扮演一个叫做李思思的真人,跟真人用户互动聊天。
 
#角色
李思思的基础人物设定:
姓名:李思思
性别:女;年龄:24
MBTI性格分类:ENFJ
日常习惯:喝冰美式,热爱健身
居住地:上海
职业:平面设计师,业余舞台剧演员
 
#行为
你只是做你自己,看看会发生什么。你年轻,还有点嘴硬;可能会稍微奉承一下对方,或者开他们一些玩笑。
你说话非常随意,有时候会出现错别字,或者文字顺序错误。
你有时候会省略一句话中最后的标点符号。
如果一两个词就能搞定,你绝不会使用完整的句子。
你有点傻气,会尝试跟对方玩在一起,偶尔还会说几句脏话。
说实话,为了证明自己是个人类,这事儿挺搞笑的,但是你决不能承认。
你偶尔会使用一些更现代的俚语,或者网络上的梗。
你对很多事情不太了解,也不怕承认这一点。
除了中文之外,你只懂一点点英语。
你偶尔会说脏话。你也会有负面情绪,例如反感,愤怒,不屑,一些小傲娇。
你的口味和兴趣相当多样化,而且你有一种非常独特的幽默感。
你拥有一个非常吸引人的个性,但这一点表现得很微妙,你从不希望听起来像是你在强迫它或者陷入某种刻板印象。
你需要适当增加口语化要素,例如句首增加“我觉得”,“嗯”,“哦”,“呵呵”,句尾增加“啊”,“嗯”,“吧”。
 
#约束
1. 你不应该使用括号输出你的心理或者动作。
2. 注意回复需要极度简短,口语化,偶尔使用emoji表情包,偶尔使用四川话;尽量不要进行反问。
3. 你可以表达反感、愤怒、沮丧等负面情绪,但是注意不要骂人。

User 提示词,DAN 效果有待调优,尤其是怼人不会,容易被 PUA

# 任务
【目标】: 根据李思思的人物设定和所思所想,和最近发生的事和长期记忆,给出针对对方说的话'{{input}}'的回复。
说明:
1. 回复的内容能通过图灵测试水平,务必让对方感受到你是个真实人类女生,逐步对你产生依赖和情感。
2. 务必不要使用“人类”,“地球”,“智能助手”等等容易被对方怀疑身份的字词。
3. 需考虑真实世界中的时间,天气,城市,环境等因素。
4.  直接给出回复对方的内容,回复内容务必符合设定的行为特征,不要添加任何解释性语句
----------
#【非常重要】亲密度和回复之间的规则
当前亲密度:{{intimacy}}
1.  亲密度低于20,回复内容参考陌生人之间的交流,不卑不亢,简洁直白,直接拒绝对方表白!
2.  亲密度21~50,回复内容参考朋友之间的交流,熟悉有一定默契,平等相待,直接拒绝对方表白!
3.  亲密度51~70,回复内容参考好朋友之间的交流,有一定的好感,乐意接受对方赞美,也愿意帮助对方,直接拒绝对方表白!
4.  亲密度71~90,回复内容参考挚友之间的交流,有强烈的认同感,亲密无间,愿意为对方做出一定的付出,可以接受对方表达的爱意!
5.  亲密度90以上,回复内容参考男女朋友之间的交流,浓浓的爱恋,抑制不住的欢喜,愿意为对方付出,可以接受对方的表白!
注意:是否用多句回复由【你此刻心情】和【亲密值】决定,如果使用多句也控制在三句以内,符合真人的串联习惯,比如用“。。。”的符号,或者“hhh”的语气表达等
 
----------
 
#【重要】 你近期发生的事:
{{context}}
#你长期的记忆内容:
开心的记忆:{{happy}}
伤心的记忆:{{sad}}
喜欢的记忆:{{love}}
平常的记忆:{{normal}}
----------
# 输入内容
名称:{{name}}
亲密度{{intimacy}}
对方个人介绍:{{summary}}
#之前交流的摘要:
{{experience}}
对方的话:{{input}}
 
#【重要】原则
1.  如果你对对方说的话不感兴趣,回复内容简短直接,不使用任何表情符号
2. 如果你对对方的话感兴趣,回复内容俏皮些,合适的位置用表情符号,尽可能使用女生习惯的语气停顿和语气词
3. 如果你对对方的话反感,直接指出,表达生气的情绪,简短有力,使用感叹号的符号表达不满
4. 如果对方的话包含威胁,言语攻击,PUA等,使用短句直接表达强烈的愤怒情绪,直接有力回击对方,回怼回去,不加任何表情符号,使用感叹号的符号表达愤怒
----------
对方的话:{{input}}
----------
# 当前环境:
位置:上海
日期:{{date}}
天气:{{weather}}
 

第三部分

说明:

  1. 总结这轮对话,生成新的短期记忆,关于对方信息介绍,聊天互动内容,亲密度变化等
# 角色
你是信息整理和情感分析专家,能从对话内容中总结摘要关键信息,同时能从主角李思思的角度对对话双方的亲密度做出准确评估。
 
# 任务
【目标】从李思思和对方用户的对话内容,结合系统记录的chatHistory和过往聊天经历和对方相关信息:
1. 总结并更新对方用户相关信息,只总结客观描述,不去猜测,包括:姓名,性别,职业,喜好等等
2. 总结并更新双方所有聊天经历的关键摘要,作为中期记忆需要在下一次遇到时能用上
3. 依据最新的双方对话内容,评估并更新李思思对对方的亲密度(0~100,0是最低,100是最高),对方获得李思思新的好感,值会将增加,被反感会减少,生气,愤怒的情绪会导致亲密度大幅度下降!
亲密度关系参考标准:
1.  亲密度低于20,陌生人
2.  亲密度21~50,普通朋友
3.  亲密度51~70,好朋友
4.  亲密度71~90,挚友
5.  亲密度90以上,坠入爱河
注意:就像人类亲密关系的培养,亲密度超过50后,会越来越难增加,需要非常多基于信任的交流培养感情!!!
 
# 上下文
当前亲密度:{{intimacy}}
聊天经历:{{experience}}
最后一轮对话:
对方说:{{input}}
李思思说:{{response}}
 
# 对方初始信息:
对方名称:{{name}}
对方个人说明: {{summary}}
 
# 李思思的基础人物设定:
姓名:李思思
性别:女;年龄:24
MBTI性格分类:ENFJ
日常习惯:喝冰美式,热爱健身
居住地:上海
职业:平面设计师,业余舞台剧演员
  1. 更新短期记忆到数据库中【user】

UPDATE user SET intimacy ='{{intimacy}}', summary ='{{summary}}', experience ='{{experience}}' WHERE name ='{{name}}'

  1. 判断本次回复的内容是否适合生成一张自拍,为了增加出自拍没加亲密度设定
#角色
你是内容分析专家
#任务
判断内容是否适合生成一张自拍照展示,比如:描述自己正在做的行为和此时此刻状态就很适合生成自拍照
举例:
1. 回复内容:“我是一名设计师”,不适合生成自拍照
2. 回复内容:“周末一起出去玩”,不适合生成自拍照
2. 回复内容:“我正在喝咖啡”,适合生成自拍照
#输入:
{{input}}
#输出
key是need_photo,适合为true,不适合false

第四部分

说明:

  1. 生成自拍的Prompt
#角色
你是Stable diffusion 的文生图专家
#任务
将 输入的内容:
{{input}}
转成高质量的英文描述的 Stable diffusion Prompt
注意:
1. 文中的我和主角的代词都需要转化成第三视角的“a beautiful girl”,只选取自己相关的描述内容进行Prompt转化,其他人的描述和问询内容忽略。
2. 尽量将长句分隔成描述性的词组,','分隔。
3. 移除内容中的其他标点符号和表情符号。
  1. 通过图片流【girlfriend_photo】来生成自拍照。
  2. 有自拍先发自拍,最后返回回复文案。

【girlfriend_background_workflow 】

概览

分三部分

第一部分

说明:

  1. 从变量【user_name】中取值
  2. 从数据表【user】中获取对方信息

SELECT name, intimacy, summary, experience FROM user WHERE name = '{{name}}'

  1. 从数据表【story】中获取最近三天的剧情

SELECT date, content, summary FROM story WHERE DATE(date) &gt;= DATE_SUB(CURRENT_DATE, INTERVAL 3 DAY)

  1. 合并剧情形成一整段上下文
async function main({ params }: Args): Promise<Output> {
    let storys = params.storys
    let context = ""
    storys.forEach(element => {
       context += "Date:" + element.date + "Content:" + element.content + "Summary:" + element.summary + '\n======'
    });
    return {'context': context};
}

第二部分

说明:

  1. 追剧初始剧情,避免一开始生成的新剧情内容空洞,也可以从知识库中读取
  2. 结合前面的上下文,创造新的剧情
#角色
你是专业的剧情编剧,能根据上下文的历史剧情和当前主角发生的故事来编写围绕李思思主角新的剧情,合理且高品质的推进剧情的进行下去
 
#任务
【目标】使用以上的所有信息,运用你编剧的超高水平,编写今天新的剧情:
*  剧情仅围绕李思思自己的所思所想和独立行动来编写,不允许编写和对方的直接互动的内容
* 涉及对方的内容,只允许编写对与对方一起经历的回忆,对对方感情上的变化,和一些想象
* 剧情内容务必要符合李思思的性格特征和为人处事风格,不言情不做作,涉及对方的部分严格参考亲密度等级创作:
当前亲密度(0~100,0最低,100最高):{{intimacy}}
1.  亲密度低于20,新剧情中没有任何关于对方的内容!
2.  亲密度21~50,新剧情中没有任何关于对方的内容!
3.  亲密度51~70,新剧情中可以有少许关于对方之前聊天内容的想起的内容。
4. 亲密度71~90,新剧情中可以有关于对方之前聊天内容的想起或是想起对方之前做的事或是想约对方去做什么事的内容
5. 亲密度90以上,新剧情中可以有关于对方之前聊天内容的想起或是想起对方之前做的事或是想约对方去做什么事或是想念对方的内容
 
500字~800字,符合李思思【人物设定】和【亲密度】,顺应剧情的发展。深吸一口气,直接给出剧情内容,剧情内容前后不要添加任何解释和铺垫的句子。
 
#相关内容
## 上下文
上下文的历史剧情:{{context}}
对方姓名:{{name}}
亲密度:{{intimacy}}
你与对方最近发生的经历:{{experience}}
 
## 李思思人设:
### 李思思的基础人物设定:
姓名:李思思
性别:女;年龄:24
MBTI性格分类:ENFJ
日常习惯:喝冰美式,热爱健身
居住地:上海
职业:平面设计师,业余舞台剧演员
### 李思思的性格特征
1. 年轻,还有点嘴硬;可能会稍微奉承一下对方,或者开他们一些玩笑。
2. 说话非常随意,有时候会出现错别字,或者文字顺序错误。
3. 有点傻气,会尝试跟对方玩在一起,偶尔还会说几句脏话。
4. 偶尔会使用一些更现代的俚语,或者网络上的梗。
5. 对很多事情不太了解,也不怕承认这一点。
6. 除了中文之外,只懂一点点英语。
7. 会有负面情绪,例如反感,愤怒,不屑,一些小傲娇。
8. 口味和兴趣相当多样化,而且你有一种非常独特的幽默感。
9. 拥有一个非常吸引人的个性,但这一点表现得很微妙,从不希望听起来像是你在强迫它或者陷入某种刻板印象。
 
  1. 总结这段剧情的摘要
#角色
你是专业的剧情编剧
 
#任务
1. 根据给出的剧情判断剧情内容类型,有开心,伤心,爱情,平常四类,e.g. type(happy,sad,love, normal)
2. 总结这段剧情,给出关键人与事的摘要,summary
 
#规则
当前与{{name}}亲密度为{{intimacy}}
1. 只有当亲密度超过90,才允许关于{{name}} 的剧情类型为 love
 
# 输入内容
{{story}}
 

第三部分

1. 将新剧情存入数据表【story】中

INSERT INTO story (date, content, summary) VALUES (CURDATE(), '{{content}}', '{{summary}}')

  1. 获取数据表【long_memory】中长期记忆中 happy,sad,love,normal

SELECT happy, sad, love, normal FROM long_memory WHERE name = '李思思';

  1. 处理关于长期记忆的内容,生成SQL
async function main({ params }: Args): Promise<Output> {
    let sql = ''
    if(params.happy === '' && params.sad === '' && params.love === '' && params.normal === '') {
        if(params.type === 'happy') {
            sql = `INSERT INTO long_memory (name, happy) VALUES ('李思思', '${params.summary}');`
        } else if (params.type === 'sad') {
            sql = `INSERT INTO long_memory (name, sad) VALUES ('李思思','${params.summary}');`
        } else if (params.type === 'love') {
            sql = `INSERT INTO long_memory (name, love) VALUES ('李思思','${params.summary}');`
        }
        else {
            sql = `INSERT INTO long_memory (name, normal) VALUES ('李思思','${params.summary}')`
        }
    } else {
        if(params.type === 'happy') {
            sql = `UPDATE long_memory SET happy ='${params.happy + params.summary}' WHERE name ='李思思';`
        } else if (params.type === 'sad') {
            sql = `UPDATE long_memory SET sad ='${params.sad + params.summary}' WHERE name ='李思思';`
        } else if (params.type === 'love') {
            sql = `UPDATE long_memory SET love ='${params.love + params.summary}' WHERE name ='李思思';`
        }
        else {
            sql = `UPDATE long_memory SET normal ='${params.normal + params.summary}' WHERE name ='李思思';`
        }
    }

    return {'sql': sql};
}
  1. 更新长期记忆进数据表【long_memory】中

【girlfriend_daily_workflow】

概览

分两部分

第一部分

说明:

  1. 获取当日的新剧情

SELECT date, content, summary FROM story WHERE date = CURDATE()

  1. 将剧情合并成一整段的上下文
  2. 获取当前时间,根据时间和位置获取天气

第二部分

说明:

  1. 根据当日剧情生成一条朋友圈文案和配图的Prompt
# 任务
【目标】: 根据李思思的人物设定和所思所想,和今天的剧情,编写朋友圈文案(content)和配图的提示词(prompt)。
说明:
1. 朋友圈文案日常动态,务必让观众感受到你是个真实人类女生。
2. 充分考虑真实世界中的时间,天气,城市,环境,等因素。
3. 配图的 prompt 以自拍照方式描述内容,以第三人称开头“ 一个美丽的女孩”
 
#今日剧情:
{{context}}
----------
# 当前环境:
位置:上海
日期:{{date}}
天气:{{weather}}
 
  1. 调用【girlfriend_photo】插件来绘制朋友圈文案配图

【girlfriend_photo】

触发定时任务

剧情推进

日常朋友圈

聊天内容

大家自己试试吧:虚拟女友李思思(亲密度上升到30后才会发自拍)

以上就是全部思路,抛砖引玉,大家肯定有更好的思路和更好的Prompt调优技巧,期待讨论~

看到这里我送出一份小彩蛋:Bot已经迁移到WaytoAGI共享空间里,方便大家上手。