0

0

帕累托排序学习:基于推荐系统公平性的排序学习

WBOY

WBOY

发布时间:2023-04-13 13:22:03

|

1721人浏览过

|

来源于51CTO.COM

转载

​作者 | 汪昊

审校 | 孙淑娟

有道智云AI开放平台
有道智云AI开放平台

有道智云AI开放平台

下载

推荐系统公平性是 2017 年以来爆火的人工智能研究领域。知名的人工智能公司比如 Twitter, Google, IBM和百度,都创立了人工智能伦理团队或研发了人工智能伦理产品。然而让人遗憾的是,人工智能伦理研究在国内起步较晚,跟国外相比,目前仍然存在着一定差距。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

帕累托排序学习:基于推荐系统公平性的排序学习

排序学习是在 2010 年左右爆发的机器学习技术,在推荐系统和信息检索领域都得到了广泛的应用。在最近几年,排序学习成为了热门的人工智能伦理研究算法基准。

本文将要介绍的是 2022 年在国际学术会议 CISAT 2022 (International Conference on Computer Information Science and Application Technology) 发表的论文 Pareto Pairwise Ranking for Fairness Enhancement of Recommender Systems。本文主要讲解了如何结合帕累托分布和排序学习实现公平的排序学习推荐算法。

帕累托排序学习:基于推荐系统公平性的排序学习

图1. MovieLens 数据集观影评分差概率分布

我们根据观察(图1)和统计学理论(齐夫分布的统计估计)可以得到如下结论: 同一个用户对不同物品的评分差的概率分布正比于评分差。我们修改概率矩阵分解的损失函数,得到我们发明的新算法帕累托排序学习(Pareto Pairwise Ranking)的损失函数公式:

帕累托排序学习:基于推荐系统公平性的排序学习

把我们刚才的观察带入到损失函数公式中,我们得到如下损失函数公式:

帕累托排序学习:基于推荐系统公平性的排序学习

我们把 L 取对数,得到如下公式:

帕累托排序学习:基于推荐系统公平性的排序学习

我们利用随机梯度下降公式求解损失函数对数,得到如下公式:

帕累托排序学习:基于推荐系统公平性的排序学习

帕累托排序学习的算法流程如下:

帕累托排序学习:基于推荐系统公平性的排序学习

帕累托排序学习:基于推荐系统公平性的排序学习

图2和图3显示的是帕累托排序学习在 MovieLens 1 Million Dataset 数据集上的测试结果。论文作者对比了 10 种推荐系统算法,发现帕累托排序学习算法在公平性指标上表现最好。

帕累托排序学习:基于推荐系统公平性的排序学习

图 4 和图 5 显示的是帕累托排序学习在 LDOS-CoMoDa 数据集上的测试结果。帕累托排序学习算法在公平性指标上的表现依然最好。

帕累托排序学习算法是国内少见的基于公平性的排序学习推荐系统算法。算法原理简单,实现简便,运行速度快。作者在 16G RAM 和 Intel Core i5 的联想笔记本上测试,执行速度飞快。人工智能伦理研究在国际上目前是研究热点,希望引起大家的足够重视。

作者简介

汪昊,前 Funplus 人工智能实验室负责人,在 ThoughtWorks, 豆瓣,新浪,网易等公司有超过 11 年的研发和管理经验。在推荐系统、聊天机器人、风控反欺诈领域有丰富的技术经验。在国际学术会议和期刊上发表论文 30 篇,获得最佳论文奖/最佳论文报告奖3次。2006 年 ACM 区域赛金牌。本科和硕士毕业于美国犹他大学。对外经贸大学在职 MBA。


相关专题

更多
页面置换算法
页面置换算法

页面置换算法是操作系统中用来决定在内存中哪些页面应该被换出以便为新的页面提供空间的算法。本专题为大家提供页面置换算法的相关文章,大家可以免费体验。

389

2023.08.14

人工智能在生活中的应用
人工智能在生活中的应用

人工智能在生活中的应用有语音助手、无人驾驶、金融服务、医疗诊断、智能家居、智能推荐、自然语言处理和游戏设计等。本专题为大家提供人工智能相关的文章、下载、课程内容,供大家免费下载体验。

402

2023.08.17

人工智能的基本概念是什么
人工智能的基本概念是什么

人工智能的英文缩写为AI,是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学;该领域的研究包括机器人、语言识别、图像识别、自然语言处理和专家系统等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

291

2024.01.09

人工智能不能取代人类的原因是什么
人工智能不能取代人类的原因是什么

人工智能不能取代人类的原因包括情感与意识、创造力与想象力、伦理与道德、社会交往与沟通能力、灵活性与适应性、持续学习和自我提升等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

620

2024.09.10

Python 人工智能
Python 人工智能

本专题聚焦 Python 在人工智能与机器学习领域的核心应用,系统讲解数据预处理、特征工程、监督与无监督学习、模型训练与评估、超参数调优等关键知识。通过实战案例(如房价预测、图像分类、文本情感分析),帮助学习者全面掌握 Python 机器学习模型的构建与实战能力。

32

2025.10.21

php源码安装教程大全
php源码安装教程大全

本专题整合了php源码安装教程,阅读专题下面的文章了解更多详细内容。

65

2025.12.31

php网站源码教程大全
php网站源码教程大全

本专题整合了php网站源码相关教程,阅读专题下面的文章了解更多详细内容。

45

2025.12.31

视频文件格式
视频文件格式

本专题整合了视频文件格式相关内容,阅读专题下面的文章了解更多详细内容。

40

2025.12.31

不受国内限制的浏览器大全
不受国内限制的浏览器大全

想找真正自由、无限制的上网体验?本合集精选2025年最开放、隐私强、访问无阻的浏览器App,涵盖Tor、Brave、Via、X浏览器、Mullvad等高自由度工具。支持自定义搜索引擎、广告拦截、隐身模式及全球网站无障碍访问,部分更具备防追踪、去谷歌化、双内核切换等高级功能。无论日常浏览、隐私保护还是突破地域限制,总有一款适合你!

41

2025.12.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
麻省理工大佬Python课程
麻省理工大佬Python课程

共34课时 | 5万人学习

国外Web开发全栈课程全集
国外Web开发全栈课程全集

共12课时 | 0.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号