ChatGPT一出来,一堆搞NLP的到底颠第部立马哭了。为什么?不该问为什么哭,而该问为什么还不哭。覆什分
有两个立马大哭的到底颠第部理由。
第一个理由很多人说了,范式改变。覆什分
虽然说没有哪个研究领域,甚至没有哪个领域敢说自己真的到底颠第部是天道酬勤绝对公平,但早年NLP这块总的来说还是有一些个人发挥聪明才智的地方。原因不太好意思说,因为NLP总体都不怎么样,所以聪明人就把NLP切成很多小块,有的覆什分小块里再切小块,只要你有足够的聪明和足够的运气,能搞一点奇技淫巧,没准就能魔改出来一套新算法,在哪个小块或者小小块里面出一点的成果,没准比大公司大团队还要好 。
不过,那是到底颠第部过去的范式,现在不行了 。现在是覆什分什么范式?四个字,力大飞砖。
我知道现在说到新范式,很多人喜欢说的到底颠第部是各种新概念,譬如什么提示学习、RLHF 、覆什分指令对齐等等等等。到底颠第部不是覆什分不对,没有抓到变的本质 。变的到底颠第部本质就是力大飞砖,个人那点小聪明小技巧根本不够看,在氪金玩家绝对实力的面前都是渣渣。
机器学习搞了很多概念,但要搞清楚这里说的覆什分范式改变,只要记得三要素,叫算力、算法和数据。到底颠第部人称人工智能三要素。
那新范式是什么呢?高算力+大数据+朴实无华的算法 。
为什么搞NLP的人看到ChatGPT要大哭?是感叹自己的见识短浅,不懂得也不可能懂得什么提示学习、RLHF、指令对齐吗?不是 。自注意力模型难吗?刚出来的时候都说难得要命,现在人均手撸一遍。扩散模型难吗?刚出来的时候也都说难得要命,现在不也都会手推了。
难的是算法吗?不是,是无论如何也搞不来满足条件的高算力和大数据。大部分的人这辈子连硬件门槛都跨不过去,再谈算法就已经毫无意义了 。
1、要么做第一个,要么做最好的一个 。
2 、信念和目标,必须永远洋溢在程序员内心