夜下客

繁体版 简体版
夜下客 > 日记月累 > 第12章 开源和闭源

第12章 开源和闭源

这几天,科技圈炸裂不断。

首先是前一段时间的openai的sora炸裂全网,可以根据文字生成视频。

虽然有些许瑕疵,但随着技术的迭代,这玩意根本不是问题。

而正在前两天,也就是17号,马斯克开源了旗下的grok-1,不愧是硅谷钢铁侠,说到做到。

在github可以找到,刚刚瞄了一眼,grok-1的start已经达到了30k,这才开源两天,看来马斯克造势还是蛮成功的。

当然,他的开源之路不止这个。

他还把特斯拉的开山之作,初代roadster也开源了...

还把twitter的推荐算法给开源了...

这位可以说是开源一哥呀。

grok大模型是马斯克用来对标chatgpt3.5的,不能说是对标,在性能上其实超越了chatgpt3.5。

从模型的参数也可以看出,gpt3.5的参数是1750亿,grok的参数为3140亿。

有趣的是这个3.14,估计就是代表圆周率π。

大佬都喜欢这么玩是吗?

目前,大模型界有两大潮流,开源和闭源。

openai走的是闭源路线,他们认为这样可以把技术牢牢掌握在自己手中,然后就可以防止坏人做坏事。

开源的就是主张把技术释放出来,促进科技发展,马斯克显然是后者。

婆说婆有理,公说公有理,这两条路没有高低之分。

但显然支持开源的人更多。

除了马斯克,还有meta的扎克伯格也开源了llama2大模型。

集思广益,多多益善。

sora大火之后,咱们中国的公司,就开源了类似sora的视频模型open-sora。

国内的话,也差不多,阿里感觉是开源方向的。

当然,就算是开源,那也得先活下去才行。

法国的mistral是靠开源发的家,然后把牌子打响了,最近mistral推出了闭源的mistral large对标chatgpt4。

由于之前开源打响了品牌,所以他的次代大模型也备受关注。

现在这家公司被誉为“欧洲的openai”。

当然,就算是openai不开源,我觉得他仍然能是全球ai发展的领头羊,毕竟公司体量在那里。

18号,openai的ceo奥特曼也发推文:“这是人类历史上最有趣的一年,除未来所有年份以外。”

马斯克的这次开源,我相信能给国内的ai厂商提供宝贵的经验,说不定过几天,国内的ai厂商就集团升级了。

不过就算是马斯克开源了,但这玩意还是有使用门槛的。

grok-1没有对特定的任务进行微调,还是通用的。

而且grok-1用的是jax,比较小众,主流的都是基于tensorflow或者pytorch开发的。

我曾经去上海参加比赛,就用过pytorch,当时是跑了一个识别图片的模型。

跑了好久...

刚看了一下grok-1,发现自己电脑带不动...

『加入书签,方便阅读』