跳到主要内容
项目详情

Prolific 是一个连接 AI 团队、研究人员与在线研究参与者的人类数据平台,官网将服务分为 AI、Research 和 Participants 三个方向。AI 团队可以获取来自具有代表性人群的人类反馈,用于偏好调优、安全评估和可辩护的基准测试;研究人员可以接触经过验证的参与者,以更快获得研究洞察;参与者则可以加入付费在线研究,在灵活安排时间的情况下完成研究并获得实际报酬。官网还展示了 Google、Hugging Face 和 Asana 等组织的使用或信任标识,并提到其参与者覆盖 70 多个国家。

核心功能

AI 评估与训练

Prolific 为 AI 场景提供来自具有代表性人群的人类反馈。官网明确将这些反馈用于 preference tuning、safety evals 和 benchmarks,也指出技术基准测试可能缺少现实相关性,而不具代表性的抽样、评估深度不足和单一指标会影响人类偏好评估。AI 团队可以围绕这些方向开展评估和训练工作。

研究参与者招募

研究人员可以通过 Prolific 接触 verified participants,并从参与者处获得研究洞察。官网将这一入口概括为“Accelerate your research”,对应的行动是发起研究,适用于需要在线参与者完成研究任务的场景。首页还展示了环境决策研究案例,说明参与者洞察曾被用于探索人们在应对气候变化时如何做出选择。

付费在线研究

参与者可以加入 paid online studies,官网将参与方式描述为快速注册、灵活安排时间和获得实际付款。参与者入口与 AI、Research 入口并列,说明 Prolific 同时面向发布研究的一方和完成研究的一方。参与者通过在线研究获得报酬,研究团队则获得来自真实参与者的反馈或洞察。

人类视角支持 AI 治理

官网介绍了 Collective Intelligence Project 使用 Prolific 将来自 70 多个国家的声音带入 AI 治理。这个案例体现了平台不仅用于模型偏好和安全评估,也可以收集更广泛的人类观点,为 AI 治理相关工作提供参与者视角。

多类研究场景支持

官网列出了 AI 评估、学术研究和参与者研究三个主要方向,并展示了大语言模型人类偏好、气候变化决策和 AI 治理等案例。研究团队可以根据自身目标选择相应入口:AI 团队进入评估与训练方向,研究人员发起研究,参与者进入付费研究方向。

使用方式

官网提供基于网站的三个主要入口。AI 团队可以选择“Evaluate and train AI”开始相关工作,研究人员可以选择“Accelerate your research”并发起研究,参与者则通过“Get paid to take studies”加入付费在线研究。参与者页面明确提到快速注册,但正文没有说明研究发布方是否必须注册、是否支持客户端、浏览器插件、API、命令行或数据导入导出,也没有提到需要自备模型 Key。

适用人群与场景

AI 团队可使用 Prolific 获取具有代表性人群的人类反馈,用于偏好调优、安全评估和基准测试。大学或其他研究机构的研究人员可以招募经过验证的参与者,开展在线研究并收集研究洞察。关注环境决策的研究团队可以参考气候变化选择研究场景,研究 AI 治理的组织则可以借助来自多个国家的人类观点。希望通过完成在线研究获得报酬的个人,可作为参与者加入付费研究并灵活安排时间。

注意事项

官网正文没有提供具体价格、免费额度或付费档位信息;也没有在给定内容中说明研究项目的具体筛选条件、参与者报酬标准或数据导出方式。

AI 评估与训练提供来自具有代表性人群的人类反馈,用于偏好调优、安全评估和基准测试。
验证参与者研究帮助研究人员接触经过验证的参与者并获得研究洞察。
付费在线研究参与者可以注册并加入付费在线研究,灵活安排时间并获得实际付款。
全球人类视角官网案例显示,平台曾将来自 70 多个国家的声音带入 AI 治理。

用户评论 (0)

还没有用户评论

成为第一个分享使用体验的人

查看更多

Prolific 截图

官网首页截图

写评论

分享你的使用体验,至少 10 个字。评论可以发多条,打分在右侧卡片单独进行。

还需 10 个字 · 0 / 500