HeartBridgeLM（亲子桥）：基于多模态和多智能体的亲子沟通智能媒介

[JChen-DHer]

HeartBridgeLM（亲子桥）

项目简介

HeartBridgeLM（亲子桥） 该项目基于多模态技术和多智能体等技术，旨在通过智能体模拟和互动优化亲子沟通，提升父母育儿技能和亲子关系。该模型的核心功能有以下三点：

1. 个性化孩子智能体构建
   父母可以通过输入孩子的基本信息（如年龄、性格、兴趣等）以及日常互动模式，创建一个个性化的“孩子智能体”。该智能体将根据父母提供的数据和行为模式模拟孩子的言行、需求与情感表达。智能体将根据孩子的成长进程和心理发展阶段，逐步调整其互动模式，以便更贴合孩子的个性与需求。

2. 成长与亲子关系建议
   提供智能教练或专业老师的建议，帮助父母更好地理解孩子的成长需求及亲子关系中的问题。这些建议涵盖从婴幼儿期到青春期的各个阶段，重点指导父母如何更有效地支持孩子的心理和情感发展，并在亲子互动中构建更加健康的沟通模式。内容包括行为引导、情感疏导以及冲突管理等方面。

3. 亲子互动练习
   通过孩子智能体，重现真实的亲子沟通场景，父母可以在无压力的环境中进行练习。这些练习模拟了常见的亲子互动场景，如教育指导、情感疏导、冲突解决等。父母可以通过模拟对话反复练习，并根据反馈进行改进，提升与孩子的沟通技巧和情感理解能力。每次练习后，系统会给出针对性的改进建议，帮助父母逐步提高亲子互动的质量。

项目架构

项目流程

1. 数据收集与清洗

• 数据收集：数据集来源于多样化的亲子关系场景，包括：
  -亲子互动复盘：由父母在亲子互动后记录自己的情绪，用于训练模型的情感和语言理解能力，帮助智能体模拟真实的亲子沟通。
  -父母育儿文本：包含育儿建议、教育理论、心理学文献等，为父母提供成长指导。
  -孩子行为数据：由父母收集与分析孩子在不同成长阶段的行为和情感表现，供智能体学习。

• 数据处理

2. 多模态模型微调

3. 模型部署

4. 应用层开发

基于以下技术提供多功能支持：
情感识别与分析：智能体能够识别并回应父母与孩子的情感变化，提供个性化的沟通反馈。
行为模拟与建议生成：通过LlamaIndex为父母提供基于实际亲子互动场景的训练和建议。

项目成员

项目成员	所属机构	职责
陈佳佳	纽约大学	模型微调、模型RAG、制作slides
田汝春	菲玲科技	数据处理、模型微调、模型RAG