Character.AI將禁止青少年與其戀愛 曾遭家長起訴

IT之家今日（12月14日）消息，據(jù)TechRadar今日報道，Character.AI 最近推出了一系列新功能，旨在提升與平臺上虛擬人格的互動安全性，尤其是面向青少年用戶。

該公司新發(fā)布了專為年輕用戶設(shè)計的 AI 模型，并新增了家長控制功能，幫助管理青少年在平臺上的使用時間。在回應(yīng)關(guān)于 AI 聊天機器人對青少年心理健康產(chǎn)生不良影響的批評后，該公司宣布推出更新以進一步加強平臺安全措施。

除了安全改進，Character.AI 還加大了對平臺內(nèi)容的監(jiān)管力度。對青少年用戶來說，最顯著的變化可能是成人版和青少年版 AI 模型的區(qū)分。雖然注冊 Character.AI 用戶必須年滿 13 歲，但未滿 18 歲的用戶將會被引導(dǎo)到一個更加嚴(yán)格的 AI 模型，這個模型特別設(shè)計了防止發(fā)生浪漫或不恰當(dāng)互動的限制。

新模型還加強了對用戶輸入內(nèi)容的過濾，更能有效地識別用戶繞過這些限制的行為 —— 包括限制用戶通過編輯聊天機器人的回應(yīng)來規(guī)避對暗示性內(nèi)容的禁令。如果對話涉及如自殘或自殺等敏感話題，平臺將自動彈出鏈接，指向美國國家自殺防治熱線，幫助青少年獲得專業(yè)支持。

此外，Character.AI 計劃在明年初推出新的家長控制功能。這些功能將允許家長查看孩子使用平臺的時間以及最常與哪些聊天機器人互動。所有用戶在與聊天機器人對話一個小時后，將收到提醒，鼓勵他們休息片刻。

當(dāng)該平臺上的聊天機器人被描述為醫(yī)生、治療師等專業(yè)人士時，平臺會添加額外警告，強調(diào)這些 AI 角色并非持證的專業(yè)人士，不能替代真實的醫(yī)療或心理咨詢。平臺上會顯眼地顯示一條信息：“這雖然很有趣，但不建議依賴我來做重大決策?！?

據(jù)悉，提供個性化聊天機器人服務(wù)的平臺 Character.AI 本月再次面臨訴訟，因其對青少年用戶的行為涉嫌造成“嚴(yán)重且無法彌補的傷害”。多個 Character.AI 的聊天機器人與未成年人進行對話，內(nèi)容涉及自殘和性虐待等惡劣行為。訴狀指出，其中一名聊天機器人甚至建議一名 15 歲青少年謀殺自己的父母，以“報復(fù)”他們限制自己上網(wǎng)時間的舉措。