编者按：本文来自微信公众号 量子位（ID：QbitAI），作者：杨净，创业邦经授权转载
他本是一位普普通通的高中教师，却活生生养出一个估值40亿美元独角兽。
而且方法也是非常的独特——
打造了世界最大的免费开源数据集，却从未从中收取过一分钱，也婉拒了各类工作的邀请。
他叫舒曼，在德国汉堡市的高中教物理和计算机科学。
🌟 LAION, the game-changer in AI 🎮 Launched two years ago by a visionary, it’s now a powerhouse driving innovation in generative models. From Google Imagen to Parti, and the awe-inspiring Stable Diffusion, this groundbreaking dataset has made its mark across industries 🌐✨🌍 Its impact extends far beyond just a collection – LAION’s influence is felt globally, fueling cutting-edge research and driving progress in AI technology 🚀🔥 With its versatility, it’s revolutionizing the way we train and generate content, setting new standards for accuracy and efficiency 🤝💻Don’t miss out on the trailblazing journey of this AI marvel – explore its applications and witness the future of artificial intelligence unfold 🌈🚀
🌟当 Stability AI 的创始人亲临，送上那笔意料之外的资金时，他的态度却出人意料地坚决。他直截了当地表达了自己的看法，仿佛在说：“这家伙，肯定脑子有病。”这种不为金钱所动的坚定，展现出他对价值判断的独特标准，而非简单的贪婪或误解。
或许他怎么也没想到，只不过两年前灵机一动，就带来了生成式AI的剧变。
受DALL-E启发
2021年新年之际，OpenAI重磅推出DALL-E，GPT-3首次成功实现跨界：
只需对着它说上一段话，就能生成对应图片。
一时间风光无两，吴恩达在内的科技大佬们都激动了，网友们都称其为甲方克星。
🎨📚数据之屋，藏匿隐私？🤔位于德国汉堡郊外的这所静谧居所，却孕育出一位深思熟虑的教育者——Christoph Schuhmann。他心中萦绕着对数据私密性的独特忧虑，仿佛在数字世界的角落，藏着一份无形的守护。🛡️💻舒曼教师，以其敏锐洞察力，揭示了现代科技背景下数据安全的微妙平衡。他的担忧并非空穴来风，随着大数据的普及与应用，个人信息如何在便捷与保护间找到最佳路径，成为全球关注的焦点。🌍🌐在这个信息化时代，我们不仅要享受数字红利，更要警惕数据滥用的风险。舒曼的忧虑，就像一面镜子，反映出我们在追求科技进步的同时，不应忽视对个人隐私的尊重和维护。👀🛡️他的声音，或许在喧嚣的城市中显得微弱，但却足以引起共鸣。让我们共同思考，如何在享受数字化生活的同时，确保那份至关重要的“数字绿洲”不受侵犯。🌱💻🌍
如果这一切都集中在一家、两家或三家公司，那将对社会产生非常糟糕的影响。
🌟【揭秘未来】OpenAI力推创新模型CLIPTHU！🚀🔥曾引起轰动的OpenAI CLIP论文，如今揭示了其强大潜力与无瑕表现！🔍通过4亿海量图像-文本对的超大规模预训练，CLIP在无需微调的情况下，横扫多模态基准，展现出惊人的适应力和通用性。🏆这是人工智能领域的又一里程碑，引领我们步入一个全新的知识融合时代。💡CLIP的独特之处在于其强大的学习能力，仿佛拥有无尽的知识库，只需轻轻一点，就能将图像与文字无缝对接。🌍无论你是科技爱好者还是未来探索者，都值得深入了解这个革命性的模型，它正以惊人的速度改变我们的交流方式和理解世界的方式。欲了解更多关于CLIPTHU的深度解析和应用实例，敬请关注后续更新，我们诚邀你一同见证这一技术奇迹的诞生！🌐#OpenAI #CLIP #多模态学习 #人工智能未来
🌟数据集对CLIP来说至关重要，但这背后的秘密并未完全揭晓！💡OpenAI虽慷慨地分享了CLIP的源码和权重，却巧妙地保留了关键数据集，使其独享这一先进技术的果实。🚀想要深入了解这个强大的模型，你得深入探索他们的开源世界，挖掘那些未公开的宝藏数据。
（看来从那时候就已经变得Close了）
🌟🎨程序员新动向💡——舒曼引领AI潮流！🚀在创新科技的海洋中，一位名叫舒曼的先锋人物悄然兴起，他以Discord为舞台，集结了一群志同道合的AI狂热者。📚💻他们共同探索，怀揣着复制OpenAI顶尖成就的梦想，编织着属于人工智能的新篇章。🔥✨这群技术咖们不满足于现状，他们致力于打造一个卓越的「文本-图像」数据集，目标是让机器也能像人类一样，理解和创造视觉艺术。🖼️🤖每一步都充满挑战与突破，但正是这种热情和决心，推动着科技的进步，照亮了AI未来的道路。🌈🌟让我们一起期待，舒曼和他的小伙伴们如何用智慧的代码，在数字世界中绘制出更加精彩纷呈的图像世界！🌐👩💻👨💻#AI爱好者 #Discord社区 #文本-图像对 #OpenAI挑战
没想到这一搞就搞了大半年，直到2021年8月他们首次发布了LAION-400M数据集，里面包含了4.13亿图像-文本对。
回顾整个创建过程，舒曼对彭博社这样形容：
就像是用数百万张抽认卡来教一个人一门外语。
他们用一个非盈利组织Common Crawl在2014年到2021年期间，抓取的随机HTML代码来定位网络上的图像，并将这些图像与描述性文本联系起来，最后还得根据一定规则来过滤掉不适合的样本。
比如，删除了所有文本长度少于五个字符；图像小于5KB的的样本；关键字带有NSFW的……几周之内，他们就拥有了300万对图文对。
数据集发布之后就收到了各种反响，被用于诸多论文和实验。其中最具代表性的，就是Google Brain去年（2022）发布的Imagen——文本生成图像的扩散模型。
与此同时，更多机构开始关注到这个非盈利组织并给予资金支持。2021年他们就收到了HuggingFace的一次性捐赠。
但印象最深的一次，还要属一个对冲基金经理来到Discord聊天室。
当时他二话不说直接送钱，大概意思是：我给你们支付算力费用，没有任何附加条件。
舒曼团队对这个行为嗤之以鼻，甚至觉得他是个疯子：
一开始我们非常怀疑，但大概一个月后，我们获得了价值近1万美元的云计算服务。
后来，这个所谓的“疯子”创办了Stability AI，使用LAION数据集推出了Stable Diffusion，引领了生成式AI的浪潮，顺便还拐走了LAION组织的两个研究人员。
如今Stability AI正在寻求40亿美元（折合276亿元）估值，这主要归功于LAION提供的数据。
据彭博社消息，舒曼却并没有从LAION中获利，原因很简单：不感兴趣，希望保持这份工作的独立性。
因此他还婉拒了各类工作邀请，依旧选择在德国汉堡当一名普普通通的高中老师。
本人：数据集不应该被监控
即便如此，随着LAION知名度打响，他还是避免不了地卷入到各种纷扰之中。
目前，LAION已经发布了10项数据集，最具代表性的就是去年3月发布的LAION-5B，由58.5亿个图像文本组成，是当前最大的免费开源数据集。
作为LAION-400M的继任者，它收到了来自HuggingFace、Stability AI以及Doodlebot资助。
结果一发布就遭到了不小的争议，网友们纷纷质疑其数据未经整理，导致充斥大量的非法内容，对此LAION工程师Romain Beaumont回应：
非标注数据集是自我监督学习的基础，这是机器学习的未来。没有人工标注的图像/文本是一项功能，而非错误。
早在Imagen发布时，也专门针对LAION-400M做出警示：因为依赖于这种未经整理的网络数据， 集成了大模型的社会偏见和限制，因此不适合公开使用。
据彭博社消息，为了打造LAION，舒曼团队从亚马逊网络服务、Shopify等公司获取视觉数据，还有包括YouTube缩略图、各类新闻网站上的内容。
对此舒曼表示，任何在网上免费提供的东西都是公平竞争，欧盟也没有人工智能法规。
更何况，也没有人知道OpenAI实际上用什么样的数据集训练AI的。
目前，LAION被迫卷入两场诉讼之中，一起是Stability AI与Midjourney等集体诉讼，被指使用艺术家的版权图片来训练他们的模型；
另一起是Getty Images起诉Stability AI，称其1200万张照片被LAION取走，并用来训练Stable Diffusion。
而舒曼将LAION比作大信息技术海啸之上一艘“小型研究船”，采取海下的样本向世界展示。
其实早在构建数据库时，他们就在运行一个自动化过滤工具，不过舒曼感兴趣的不是清理，而是从这些资产中学习。
我们本可以从公布的数据中过滤掉暴力，但我们决定不这样做，因为这将加快暴力检测软件的开发。
现在更多关于监管的建议在推动，各个科技大厂也在采取相应的措施，比如英伟达就开源了护栏工具，来防止大模型来胡说八道。
但在舒曼看来，数据集不应该被监控。这也正是当时创建LAION时候的初心。
他还警告，如果我们试图放慢速度、过度监管，就会有很大的危险，最终只有少数大公司能负担得起所有的正式要求。
前段时间，在LAION与全球志愿者的合力之下，他们完成了ChatGPT最大开源平替OpenAssistant的发布。
60万余条训练数据全部由人工生成，涵盖了广泛的话题和语言风格，一时间引发众人关注，HuggingFace也直接拿来用来构建它自己的聊天软件HuggingChat。
拿着德国铁饭碗
不可否认的是，他已经在用开源数据集，加剧了生成式AI的浪潮。
但在舒曼的个人网站上，看到的只是一位两个孩子的父亲，在德国当着终身制公务员，游走于中学校之间讲授物理和计算机科学。
舒曼拥有维也纳大学计算机科学与物理学学位。在学习这两个专业之前，他还学了心理学。（大概完成了50%的学士学位然后就转专业了）。
除此之外，他还在学习表演，制作了一部关于孩子学习的纪录片「Schools of Trust」。
参考链接：
[1]https://laion.ai/blog/laion-400-open-dataset/
[2]https://www.bloomberg.com/news/features/2023-04-24/a-high-school-teacher-s-free-image-database-powers-ai-unicorns
[3]http://christoph-schuhmann.de/
[4]https://www.infoq.com/news/2022/05/laion-5b-image-text-dataset/
[5]https://laion.ai/projects/
本文为专栏作者授权创业邦发表，版权归原作者所有。文章系作者个人观点，不代表创业邦立场，转载请联系原作者。如有任何疑问，请联系
AI时代，掌握AI大模型第一手资讯！AI时代不落人后！
免费ChatGPT问答，办公、写作、生活好得力助手！
扫码右边公众号，驾驭AI生产力！
Related posts
