图片来源:由无界版图AI工具生成
最近的谷歌像个大漏勺,这不,又有AIGC核心成员联手跑路咯!
量子位独家获悉,这回跟谷歌saybyebye的,是文生图核心团队——AI绘画模型Imagen论文的四位核心作者,出走目的是要搞自己的AI公司。虽然公司名称暂未对外公布,但新公司将一以贯之的路线是很清楚的:
以Imagen为基础,沿着原来的项目做下去,不仅继续做文生图,还要做视频方向。
核心人才创业,自然少不了VC塞钱——已经按1亿美元的惊人天使估值完成了首轮融资,而且更多VC想给钱而赶不上、投不进。
这也算是文生图、文生视频、AIGC赛道上,最知名的研究团队之一了。
文生图骨干成员共创AIGC新公司
新公司联创四人,ChitwanSaharia、WilliamChan、JonathanHo以及MohammadNorouzi,都出自谷歌。
他们之前精力重点放在AIGC的文生图板块,是谷歌用来对抗DALLE-2的大杀器Imagen的论文共同作者,位置都挺重要的那种。
谷歌云正在与Polygon Labs合作以加速Polygon生态发展:金色财经报道,Polygon Labs在2023 共识大会期间发表的一份声明中表示,谷歌云正在与 Polygon Labs 合作,帮助开发人员更轻松地在基于以太坊的第 2 层区块链上构建、发布和发展他们的 Web3 产品和去中心化应用程序 (dapps)。根据新的合作伙伴关系,谷歌云将把其区块链节点引擎,这家科技巨头的完全托管节点托管服务,引入 Polygon 生态系统,这将帮助开发人员专注于构建协议,同时保留对节点部署位置的完全控制。
Polygon 总裁 Ryan Wyatt 在声明中说,今天与 Google Cloud 的合作旨在提高交易处理量,从而支持游戏、供应链管理和 DeFi 中的用例,他补充说,这将为更多企业通过Polygon采用区块链技术铺平道路。[2023/4/28 14:31:40]
先来介绍一下ChitwanSaharia,也是Imagen的共同一作。
Chitwan本科毕业于孟买理工学院计算机科学与工程专业,在孟买理工学院和蒙特利尔大学都当过程序和算法方面的研究助理。2019年加入谷歌,base多伦多,花了3年时间从二级软件工程师做到高级研究科学家,去年12月从谷歌离职。
谷歌母公司Alphabet在2021年9月至2022年6月期间向区块链公司投资了15.6亿美元:金色财经报道,研究表明,谷歌母公司Alphabet在2021年9月至2022年6月期间共向区块链公司投资了15.6亿美元,共进行了四轮投资,在投资该行业的上市公司中处于领先地位。
此外,贝莱德三轮投资11.7亿美元,其次是银行业巨头摩根士丹利,两轮融资11亿美元。在其他地方,电子巨头三星以 9.79 亿美元的 13 轮融资领先,而高盛以6.98亿美元位居第五。[2022/8/16 12:29:17]
Chitwan有语音识别、机器翻译的经验,在谷歌工作时,主要负责领导image-to-image扩散模型的工作。
第二位WilliamChan,也是Imagen论文共同一作。他同样出身计算机工程,先后就读于加拿大滑铁卢大学、卡内基梅隆大学,中间在新加坡国立大学当过1年交换生。
在卡内基梅隆大学拿下博士学位后,William还在加拿大最大的社区学院之一乔治布朗学院,主攻烘焙和烹饪,学了3年。
Willian从2012年起加入谷歌,于2016年成为谷歌大脑的一份子,去年5月离职时,他已经是谷歌大脑多伦多的研究科学家了。
然后要介绍的是JonathanHo,UC伯克利博士毕业。
谷歌支付工程师:长期看空那些没有为协议提供价值却榨取租金的代币:谷歌支付工程师Tyler Reynolds发推称,“我长期看空那些没有为协议提供有价值的东西却榨取租金的代币。保险(MKR)和质押(RUNE、SNX和许多其他代币)是我见过唯一看起来可持续的模式。治理不值得花钱。”
DeFiance Capital资产管理人Wangarian评论称,“我认为值得一提的是有明确价值累积途径(尽管现在还没有)的协议。根据其所处的阶段,人们可以提出对未来价值的预期。UNI和INDEX对我来说是最突出的。”[2020/11/22 21:40:51]
他不仅是Imagen论文的corecontribution,还是DiffusionModel奠基之作《DenoisingDiffusionProbabilisticModels》的一作。
博士毕业于UC伯克利计算机科学专业的Jonathan,之前在OpenAI当过1年的研究科学家,后来在2019年加入谷歌,共工作了2年零8个月,去年11月以研究科学家的身份从谷歌离职。
新公司的最后一位联创叫MohammadNorouzi,也是Imagen论文的共同一作。
动态 | 安全提醒:谷歌搜索页面显示冒充Ledger钱包官网的钓鱼网站:Ledger钱包是最受欢迎的比特币硬件钱包之一,Bitcoin Exchange Guide团队发现,Google搜索结果页面上出现新的钓鱼网站,者瞄准Ledger用户,试图在网上窃取用户的私钥。如果搜索Ledger官网(Ledger.com)的人不小心漏掉字母,输入Ledger.co会显示两个可疑网站:付费广告Leedger.info和克隆网站Ledger.co,后者试图说服用户输入恢复种子(创建Ledger钱包时设置的12或24个单词的助记词),如果用户将恢复种子输入Ledger.co,那么钱几乎肯定会被盗。第一个网站Leedger.info重定向到第二个欺诈性网站Ledger.co,可能是同一伙子。(Bitcoin Exchange Guide)[2019/11/20]
△
他在多伦多大学计算机科学博士就读期间,拿到了谷歌ML博士奖学金。毕业后他加入谷歌大脑,在那儿工作了7年,在谷歌的最后title是高级研究科学家,工作重点是生成模型。
同时,Mohammad也是谷歌神经机器翻译团队的原始成员,SimCLR的联合发明人。他在GitHub主页上小小地透露了自己的最近动态:
目前,我在一家初创公司工作,公司使命是推进人工智能的发展水平,帮助人类提高创造力。我们正在招聘!
这句话以外,关于新公司的更多信息,四人在任何社交平台都没有更详细的透露。
这已经是谷歌最近漏出去的第n波人了。
就拿刚刚过去的2个月来说,先是包括顾世翔在内的至少4名谷歌大脑成员加入OpenAI;情人节时,HyungWonChung和CoT最早的一作JasonWei携手组团叛逃OpenAI。
动态 | ONTology已在谷歌云、Amazon Web和微软Azure发布公链:据coingape消息,根据最新发布的消息,ONTology宣布已第一个在谷歌云、Amazon Web服务和微软Azure上发布了公共区块链。在这些云提供商上使用本体开发平台,用户可以使用和开发智能契约,而不必在本地配置和设置环境。受利好因素影响,ONT的交易量在过去24小时内大幅增长了15%,根据coinmarketcap的数据,其市值为2.95亿美元,排在第21位,较上周上升6位。[2019/2/24]
本周三,您猜怎么着?嘿,又跑了一个:
OpenAI狂喜,只有谷歌大漏勺本勺受伤的世界诞生了。
Imagen是什么?
了解完谷歌漏走的这四个人,回头来说说为他们职业生涯赢得掌声的Imagen项目。
Imagen是谷歌发布的文生图模型,发布时间在DALL-E2新鲜出炉一个月以后。
本文开头放的熊猫震惊表情包,就是朝Imagen输入“一只非常快乐的毛茸熊猫打扮成了在厨房里做面团的厨师的高对比度画像,他身后的墙上还有一幅画了鲜花的画”后,得出的一张要素完备的AI生成画作。
在Imagen出现之前,文生图都共用一个套路,那就是CLIP负责从文本特征映射到图像特征,然后指导一个GAN或DiffusionModel生成图像。
Imagen不走寻常路,开辟了text-to-image新范式:
纯语言模型只负责编码文本特征,具体text-to-image的工作,被Imagen丢给了图像生成模型。
具体来讲,Imagen包含一个冻结的语言模型T5-XXL,当作文本编码器。T5-XXL的C4训练集包含800GB的纯文本语料,在文本理解能力上比CLIP强不少,因为后者只用有限图文对训练。
图像生成部分则用了一系列扩散模型,先生成低分辨率图像,再逐级超采样。
依赖于新的采样技术,Imagen允许使用大的引导权重,所以不会像原有工作一样使样本质量下降。这么一来,图像具有更高的保真度,并且能更好地完成图像-文本对齐。
概念说起来简单,但Imagen的效果还是令人大为震撼的。
生成的狗子飙车技术一流:
比起爆火的DALLE-2,Imagen能更准确地理解同时出现两个颜色要求的情况:
一边绘画一边写字这种要求,Imagen也成功完成,不仅写得对,还能加光影魔术手般的烟花特效。
以及对后来研究更有帮助的是,谷歌通过Imagen的研究,优化了扩散模型。
首先,增加无分类器引导的权重可以改善图文对齐,同时却会损害图像保真度。
为了解决这个bug,在每一步采样时引入动态阈值这个新的新的扩散采样技术,来防止过饱和。
第二,使用高引导权重的同时在低分辨率图像上增加噪声,可以改善扩散模型多样性不足的问题。
第三,对扩散模型的经典结构U-Net做了改进,变成了EfficientU-Net。后者改善了内存使用效率、收敛速度和推理时间。
后来在Imagen上微调,谷歌还推出了能“指哪打哪”版本的文生图模型DreamBooth。只需上传3-5张指定物体的照片,再用文字描述想要生成的背景、动作或表情,就能让指定物体“闪现”到你想要的场景中。
比如酱婶儿的:
又或者酱婶儿的:
大概是Imagen效果太过出色,劈柴哥后来亲自宣发的谷歌AI生成视频选手大将,就叫做“ImagenVideo”,能生成1280*768分辨率、每秒24帧的视频片段。
啊,等等,谷歌有ImagenVedio,这和四人的新公司不是撞方向了吗?
仔细看了下论文,无论是Imagen还是ImagenVideo,各自都有大篇幅涉及风险、社会影响力的内容。
出于安全、AI伦理和公平性等方面考虑,Imagen和ImagenVedio都没有直接开源或开放API,甚至连demo都没有。
哪怕市面上出现开源复刻版本,也不是最正宗的味道。
此前就曝出过在谷歌每年的内部员工调查“Googlegeist”中,员工表示对谷歌执行能力不佳的质疑。也许,这四人出走,继续做Imagen,并做Imagen的视频版,说不定就是为了想把项目放到一个更开放的AI环境。
而且这种出走创业,也是热钱大钱向AIGC汹涌的结果。
所以既然AIGC的创投热潮已经在太平洋那头开启,那应该在太平洋这头也不会悄无声息。
或许你已经听说了一些同样的大厂出走创业,欢迎爆料说说~~
来源:“量子位”,DeFi之道
作者:衡宇
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。