破除AI数据壁垒 数据DAO正当时

时间:2024-09-30 编辑: 浏览:(166)

作者:Li Jin,Variant Fund合伙人;翻译:xiaozou

最近备受瞩目的数据授权交易(如OpenAI与News Corp和Reddit之间的交易)突显了人工智能(AI)对高质量数据的需求。前沿大模型已经在大部分互联网上进行了训练——例如,Common Crawl索引了大约10%的网页,用于LLM训练,包含超过100万亿枚代币。

进一步改进人工智能模型的一个途径是扩展和增强它们可用于训练的数据。我们一直在讨论聚合数据的机制——特别是以一种去中心化的方式。我们尤为感兴趣的是探索去中心化方法如何帮助生成新的数据集,并为贡献者和创建者提供经济奖励。

最近几年加密领域里的讨论话题之一就是数据DAO的概念,即创建、组织和管理数据的一群人。这个话题已经被Multicoin和其他人谈过了,但人工智能的快速发展催生了关于数据DAO的一个新的问题——“为什么现在正当时?”

本文,我们将分享我们对数据DAO的思考,以求回答这样一个问题:数据DAO如何加速人工智能的发展?

1、AI领域的数据现状

如今,人工智能模型是在公共数据上进行训练的,要么是通过News Corp和Reddit等合作来实现,要么是通过在开放的互联网上收集数据。例如,Meta的Llama 3是使用公开来源的15万亿代币进行训练的。这些方法在快速聚合大量数据方面是很有效的,但它们在收集哪类数据以及如何收集数据方面都有局限性。

首先,应收集什么样的收据:人工智能的发展受到数据质量和数量的瓶颈。Leopold Aschenbrenner曾写过限制算法进一步改进的“数据墙”相关内容:“很快,在更多的抓取数据上预训练更大的语言模型的朴素做法可能会开始遭遇严重的瓶颈。”

推倒数据墙的一种方法是开启新数据集的可用性。例如,模型公司无法在不违反大多数网站服务条款的情况下抓取登录数据,而且根据定义,它们无法访问尚未收集的数据。目前还有大量的私人数据是人工智能训练无法获取的:比如Google Drive和Slacks等公司、个人健康数据或私人信息。

其次,如何收集收据:在现有的模式下,数据收集公司获取了大部分价值。Reddit的S-1将数据授权作为主要的预期收入源:“我们预计,我们不断增长的数据优势和知识产权将继续成为未来LLM训练的关键要素。”生成实际内容的最终用户并没有从这些授权协议或人工智能模型本身获得任何经济利益。这种错位可能会扼杀参与积极性——已经有起诉生成式人工智能公司或选择退出训练数据集的运动。更不用说将收入集中在模型公司或平台的手中而不分给最终用户分毫所带来的社会经济影响。

2、数据DAO效应

上述数据问题有一个共同的主线:它们受益于来自不同的、有代表性的用户样本的大量贡献。任何单个数据点对模型性能的价值可能都可以忽略不计,但总体来看,一大群用户可以聚集对人工智能训练有价值的新的数据集。这就是数据DAO概念的用武之地。有了数据DAO,数据贡献者可以通过提供数据收获经济好处,并可管理数据的使用方式和货币化方式。

数据DAO可以在当前数据领域里的哪些方面做出贡献?下面是一些想法——请注意,这并非一个详尽列表,数据DAO肯定还有其他的机会:

(1)现实世界数据

在去中心化物理基础设施(DEPIN)领域,Hivemapper等网络旨在收集全世界最新的全球地图数据,方法是通过激励行车记录仪的所有者贡献他们的数据,以及激励用户通过他们的应用程序贡献数据(例如关于道路封闭或维修的数据)。可以将DEPIN视为现实世界的数据DAO,其中数据集是从硬件设备和/或用户网络生成的。这些数据对许多公司都有商业价值,收入将以代币奖励的形式回馈给贡献者。

(2)个人健康资料

生物黑客是一项社会运动,指的是个人和社区采取DIY的方法来研究生物学,通常是拿自己来做实验。例如,一个人可能会服用不同的益智药物来提高大脑的表现,或者测试不同的治疗方法或环境变化来改善睡眠,甚至还有人给自己注射实验性药物。

数据DAO可以通过组织参与者围绕共同的实验和系统地收集结果,为这些生物黑客的努力带来激励。这些个人健康DAO获得的收入,例如来自研究实验室或制药公司的收入,可以回到以自己的个人健康数据形式贡献结果的参与者。

(3)用人类反馈强化学习

使用RLHF(使用人类反馈强化学习)微调人工智能模型涉及到利用人类输入来提高人工智能系统的性能。通常,人们期待反馈者都是他们各自领域的专家,他们可以有效地评估模型的输出。例如,实验室可能会寻求数学博士的帮助来提高他们的LLM的数学能力,等等。代币奖励可以通过其投机优势在寻找和激励专家参与方面发挥作用,更不用说使用加密支付轨道所提供的全球访问权了。Sapien、Fraction和Sahara等公司都正在这一领域开展工作。

(4)私人数据

随着可供人工智能训练使用的公开数据越来越少,竞争的基础可能会转向专有数据集,包括私人用户数据。登录墙后面有大量高质量的数据仍然无法访问,例如私信、私人文件等。这些数据不仅可以有效地训练个人AI,而且还包含了在公共网络上无法访问的有价值的信息。

然而,访问和利用这些数据在法律和道德上都面临着重大挑战。数据DAO可以提供一种解决方案,允许有意愿的参与者上传和变现他们的数据,并可管理数据的使用方式。例如,Reddit数据DAO允许用户上传他们从Reddit平台导出的Reddit数据,其中包含评论、帖子和投票历史,这些数据可以以隐私保护的方式出售或出租给人工智能公司。代币激励让用户不仅可以通过一次性交易赚取收益,还可以基于使用其数据训练的人工智能模型所创造的价值大小赚取收益。

3、开放问题与挑战

虽然数据DAO的潜在好处是巨大的,但也存在一些考量和挑战。

(1)激励的扭曲影响

从Crypto使用代币激励的历史中可以看到一点,那就是外部激励会改变用户行为。这对利用代币激励来实现数据目的有直接影响:激励可能会扭曲参与者群体和其所贡献的数据类型。

代币激励的引入也引入了参与者寻求系统漏洞的可能性,例如提交低质量或捏造数据来让他们的收入最大化。这很重要,因为这些数据DAO的收益机会取决于数据质量。如果贡献偏离目标,就会破坏数据集的价值。

(2)数据测量和奖励

数据DAO的核心思想是,通过代币激励来奖励贡献者的数据提交,从长远来看,这将成为DAO所获得的收入。然而,考虑到数据价值的主观性,确切地知道应该对各种数据贡献给予多少奖励是极具挑战性的。在上面关于生物黑客的例子中,例如:某些用户的数据比其他用户的数据更有价值吗?如果是,决定因素有哪些?对于地图数据来说:某些地区的地图信息是否比其他地区更有价值?这种差异如何量化?(通过计算数据对模型性能的增量贡献来衡量人工智能中的数据价值这方面的研究非常活跃,但这种方法可能需要大量的计算。)

另外,建立健全的机制来验证数据的真实性和准确性至关重要。如果没有这些措施,系统可能容易面临欺诈性数据提交(例如创建虚假账户)或Sybil攻击。DEPIN网络试图通过在硬件设备级别进行集成来解决这个问题,但是依赖于用户贡献的其他类型的数据DAO可能容易受到操纵。

(3)新数据递增量

大多数开放网络已经被用作训练目的,因此数据DAO操作员必须考虑,通过分布式方式收集的数据集是否真的是开放网络上现有数据的增量和附加,以及研究人员是否可以从平台上获得这些数据或通过其他方式获取这些数据。上述想法强调了收集全新数据的重要性,这些数据超越了现有的数据,导致了接下来的考量:影响大小和收益机会。

(4)评估收益机会

从本质上讲,数据DAO正在构建一个双边市场,将数据买家和数据贡献者联系起来。因此,数据DAO的成功取决于能否吸引稳定且多样化的、愿意为数据付费的客户群。

数据DAO需要识别和验证其最终需求,并确保收益机会足够大(无论是基于总量还是基于单个贡献者),以激励所需数据的数量和质量。例如,创建一个用户数据DAO来汇集个人偏好以及出于广告目的浏览数据的想法已经讨论了好几年了,但最终,这样一个网络能够传递给用户的收益可能微乎其微。(作为对比参考,Meta在2023年底的全球ARPU为13.12美元。)随着人工智能公司计划在训练方面投入数万亿美元,分给每个用户的数据收益可能足以吸引大规模贡献,这就给数据DAO提出了一个有趣的问题:“为什么是现在?”

4、攻克数据墙

数据DAO代表了一种潜在的光明前景,可以生成新的高质量数据集,并攻克人工智能领域里的数据墙。具体如何实现还有待观察,但我们很高兴看到这个领域的发展。

最新 更多 >
  • 1 MAIN币值多少钱一枚

    在数字货币市场中,有许多种不同的加密货币,而其中一种备受追捧的币种就是MAIN币。MAIN币是一种使用区块链技术发行的数字货币,它以其独特的特性和广泛的应用场景在市场上得到了广泛的认可。MAIN币的价值是由市场供需关系决定的,它的价格会随着市场上投资者对其需求的变化而产生波动。目前,MAIN币的市场价格约为1.5美元一枚,但请注意,这个价格是根据市场情况而定的,可能会随时发生变化。MAIN币采用了

  • 2 ATMOS币怎么买卖

    ATMOS币是一种基于区块链技术的数字货币,它具有去中心化、高效、安全的特点。ATMOS币可以用于支付、投资、交易等多种场景,吸引了越来越多的投资者和用户的关注。欧易交易所是一家知名的数字货币交易平台,成立于2013年。该交易所为用户提供了安全、便捷的交易环境,支持多种数字货币的交易买卖。用户可以在欧易交易所上轻松买卖ATMOS币,通过简单的操作完成交易。币安交易所是全球领先的数字货币交易平台之一

  • 3 AUDT币去哪里买

    AUDT币(AUDT)是一种数字货币,主要用于与澳大利亚法定货币(澳元)实现1:1锚定的加密资产。作为加密世界中的数字化澳元,AUDT币的发行旨在为用户提供一种稳定的加密资产,以及更加高效便捷的跨境支付和结算解决方案。如果您对AUDT币感兴趣并打算购买,下面将为您介绍三个著名的交易所,以帮助您进行交易。首先,欧易交易所是一个知名的数字资产交易平台,提供许多数字货币的交易对。欧易交易所为用户提供了快

  • 4 ASS币哪个市场有

    ASS币是一种虚拟货币,它是由一群技术爱好者共同开发的。ASS币采用了先进的区块链技术,使其具备了高度的安全性和匿名性。同时,ASS币还具备快速转账、低手续费和去中心化等优势,使其逐渐受到全球范围内数字货币爱好者的欢迎。欧易交易所是一个知名的数字货币交易平台,它成立于2013年,总部位于香港。欧易交易所提供了多个币种交易对,为用户提供便捷的数字资产交易服务。作为一个成熟的交易所,欧易交易所对于安全

  • 5 ASW币去哪里交易

    ASW币是一种基于区块链技术的加密货币,它具有去中心化、安全性高等特点。ASW币的发行数量有限,这使得它在市场上具有一定的稀缺性,也增加了其投资价值。在选择交易所时,我们通常会考虑交易所的安全性、交易手续费、流动性以及交易品种等因素。下面将介绍三个著名的交易所,它们分别是欧易交易所、币安交易所和火币交易所。欧易交易所是一家知名的全球加密货币交易平台。它拥有丰富的交易品种,包括ASW币在内的多种数字

  • 6 LORD币有希望吗

    随着数字货币市场的兴起,各种新兴币种层出不穷,其中一个备受关注和瞩目的币种就是LORD币。LORD币作为一种安全、高效的数字货币,备受投资者的青睐。那么,LORD币是否真的有希望成为下一个热门币种呢?让我们一起来探讨。首先,LORD币具备一系列优势,这也是人们看好它的其中原因之一。作为基于区块链技术的加密货币,LORD币具备高度的安全性和匿名性。与传统的金融交易相比,使用LORD币进行交易可以更好

  • 7 LQDR币有希望吗

    LQDR币,全名为Liquidity Dividend Rights,这是一个相对较新的加密货币项目。它的目标是通过为持有者提供流动性优化奖励,解决DeFi领域的流动性问题。然而,对于LQDR币而言,是否有希望成为成功的项目是一个备受关注的问题。首先,我们需要了解LQDR币的特点和优势。通过参与流动性挖矿和持有LQDR币,用户可以获得一定的奖励。这种机制可以激励用户提供更多的流动性,增加市场的深度

  • 8 ASTO币在哪个平台买

    ASTO币是一种数字货币,采用区块链技术进行交易和记录。它是基于区块链技术发行的一种去中心化加密货币,旨在提供安全、私密和可追溯的交易服务。ASTO币具有交易速度快、手续费低、去中心化以及分散化风险等特点。欧易交易所是全球知名的数字货币交易所之一,致力于为用户提供安全、稳定、高效的交易服务。它支持多种加密货币的交易,并提供深度行情、实时资讯、风险控制等功能。欧易交易所是许多数字货币投资者的首选平台

  • 9 KOI币最高的时候是多少钱?

    KOI币最高的时候是多少钱?在过去几年中,加密货币市场已经看到了一次大规模的繁荣。市场上的许多数字货币都经历了数倍甚至数十倍的价格涨幅。KOI币就是其中之一,它的市值一度飙升到了让人难以置信的高度。在2017年12月,KOI币的价格在一周内经历了空前的飞涨,最终飙升至1.18美元。这一价格是KOI币历史上最高的价格,与其代币发售时的价格相比,涨幅高达37,000%,引起了外界的强烈关注。KOI币当

  • 10 LOOKS币值多少钱一枚

    LOOKS币是一种虚拟货币,它是由币界科技公司创造的一种加密数字货币。与传统货币不同,LOOKS币是通过使用密码学技术来保障安全性和匿名性的数字资产。虚拟货币市场在近年来迅速发展,LOOKS币也在这个市场中崭露头角。人们开始意识到 LOOKS 币的潜力和重要性。目前,LOOKS币的价值已经超过其他加密货币,成为市场上最有价值的币种之一。人们为什么对 LOOKS 币如此感兴趣?首先,LOOKS币拥有