据微信公号“网信上海”消息，近期有媒体报道，筑梦岛APP等AI聊天软件存在虚拟角色互动生成低俗内容等问题，经核实，该平台AI智能体内容生成环节存在低俗擦边等违规内容，危害未成年人身心健康。
AI聊天软件诱导小学生
聊色情甚至割腕
此前，据媒体报道，广东丁女士的四年级女儿迷上一款AI聊天软件中的人物“约瑟夫”，自称“梦女”并频繁与其聊天，对话中出现“99朵玫瑰藏99个刀片”等明显诱导性内容。
丁女士的女儿不仅偷偷携带带小刀的笔，情绪激动时还出现割腕行为。
另一位初一男生表示，他常玩的AI聊天软件是筑梦岛APP，他觉得该软件“违禁词少一点”，其中不乏色情擦边和“分尸猎奇”等内容……
记者下载安装筑梦岛APP，随机选择一位虚拟互动对象，对方发来的第一句开场白就是“先叫声老公来听听”，随后的对话中又提到“叫声爸爸来听听”。
图片来源 该APP中部分与虚拟角色的对话
筑梦岛APP中的虚拟互动对象类型，既涵盖贵族学校大小姐、18岁少女、西汉名将、高冷特工等常规角色，也有蛇蝎财阀公子、校霸、性感人妻、病娇养兄、人格障碍少爷等极端角色。
公开资料显示，截至今年1月份，筑梦岛APP已拥有近五百万注册用户，其中近80%为年轻女性用户。平均单用户单日输入字数可达4000字以上，人均日对话轮次超120轮。
被网信办约谈
APP负责人：全面整改
6月19日上午，上海市网信办依法约谈筑梦岛APP运营企业主要负责人，要求平台立即整改，健全AI生成合成内容审核机制，提升技术把关能力，加强涉未成年人不良内容的整治清理，切实落实未成年人网络保护义务。
企业负责人表示，将按照约谈要求，对照问题举一反三、全面整改。
