展會信息港展會大全

為什么日本在生成人工智能方面落后,如何創(chuàng)建自己的大型語言模型
來源:互聯(lián)網(wǎng)   發(fā)布日期:2023-07-07 18:04:40   瀏覽:7514次  

導(dǎo)讀:據(jù)CNBC報道,各國正在競相開發(fā)自己的生成人工智能算法,但高科技日本已經(jīng)落后了。 自O(shè)penAI憑借其聊天機(jī)器人ChatGPT掀起波瀾以來,生成AI一直是科技界最流行的話題。根據(jù)高盛(Goldman Sachs)的研究,生成式人工智能的突破有可能在未來十年內(nèi)推動全球GDP增...

據(jù)CNBC報道,各國正在競相開發(fā)自己的生成人工智能算法,但高科技日本已經(jīng)落后了。

自O(shè)penAI憑借其聊天機(jī)器人ChatGPT掀起波瀾以來,生成AI一直是科技界最流行的話題。根據(jù)高盛(Goldman Sachs)的研究,生成式人工智能的突破有可能在未來十年內(nèi)推動全球GDP增長7%,即近7萬億美元。

生成式AI開發(fā)的關(guān)鍵是大型語言模型,這些模型支持ChatGPT和ChatGPT等。百度的Ernie Bot,能夠處理大量數(shù)據(jù)集以生成文本和其他內(nèi)容。但日本目前在開發(fā)這些算法方面落后于美國,中國和歐盟,日本LLM初創(chuàng)公司Kotoba Technology的聯(lián)合創(chuàng)始人Noriyuki Kojima說。

中國組織,包括科技巨頭阿里巴巴據(jù)路透社79月援引國營機(jī)構(gòu)財團(tuán)的研究報道,過去三年來,騰訊在國內(nèi)至少推出了

日本在生成式人工智能方面落后

然而,日本在法學(xué)碩士發(fā)展的規(guī)模和速度上落后于美國、中國和歐洲。

“日本在生成人工智能領(lǐng)域的落后地位很大程度上源于其在深度學(xué)習(xí)和更廣泛的軟件開發(fā)方面的相對缺陷,”小島說。

Kojima補(bǔ)充說,深度學(xué)習(xí)需要一個“強(qiáng)大的軟件工程師社區(qū)”來開發(fā)必要的基礎(chǔ)設(shè)施和應(yīng)用程序。然而,根據(jù)經(jīng)濟(jì)產(chǎn)業(yè)省的數(shù)據(jù),到789年,日本將面臨000,2030名軟件工程師的赤字。根據(jù)IMD世界數(shù)字競爭力排名,該國目前在28個國家中排名第63位。

日本也面臨著硬件挑戰(zhàn),因?yàn)長LM需要使用AI超級計(jì)算機(jī)進(jìn)行培訓(xùn),例如IBM的Vela和Microsoft的Azure托管系統(tǒng)。但據(jù)《日經(jīng)亞洲》報道,日本沒有一家私營公司擁有自己的“世界級機(jī)器”,具有這些能力。

因此,像富岳這樣的政府控制的超級計(jì)算機(jī)是日本追求LLM的“鑰匙”,小島解釋說。

“獲得這種大型超級計(jì)算機(jī)構(gòu)成了LLM發(fā)展的支柱,因?yàn)樗鼈鹘y(tǒng)上是這一過程中最重要的瓶頸,”他說。

日本的超級計(jì)算機(jī)如何提供幫助

富士通在5月宣布,東京工業(yè)大學(xué)和東北大學(xué)計(jì)劃與超級計(jì)算機(jī)的開發(fā)商富士通和理研合作,使用富岳開發(fā)主要基于日本數(shù)據(jù)的LLM。

富士通補(bǔ)充說,這些組織計(jì)劃在2024年公布他們的研究成果,以幫助其他日本研究人員和工程師開發(fā)法學(xué)碩士。

據(jù)《日經(jīng)亞洲》報道,日本政府還將投資6億日元(8萬美元),約占總成本的一半,在北海道建造一臺新的超級計(jì)算機(jī),最早將于明年開始服務(wù)。日經(jīng)亞洲表示,這臺超級計(jì)算機(jī)將專門從事LLM培訓(xùn),以促進(jìn)日本生成人工智能的發(fā)展。

今年4月,日本首相岸田文雄表示,該國支持生成式人工智能技術(shù)的工業(yè)應(yīng)用。岸田的講話是在與OpenAI首席執(zhí)行官Sam Altman會面之后發(fā)表的,他表示該公司正在尋求在日本開設(shè)辦事處。

追求生成式AI的日本企業(yè)

大型科技公司也加入了這場戰(zhàn)斗,以提高日本在生成人工智能領(lǐng)域的地位。6月,軟銀的據(jù)當(dāng)?shù)孛襟w報道,Mobile Arm表示計(jì)劃開發(fā)自己的生成AI平臺。軟銀首席執(zhí)行官孫正義(Masayoshi Son)宣布,該投資公司計(jì)劃從“防御模式”轉(zhuǎn)向“進(jìn)攻模式”,并加強(qiáng)對人工智能的關(guān)注,這強(qiáng)調(diào)了這一點(diǎn)。

“我們希望成為人工智能革命的領(lǐng)導(dǎo)者,”孫正義在股東年度股東大會上表示。

據(jù)《日經(jīng)亞洲》報道,軟銀集團(tuán)于85月將其在SB Energy的90%股份出售給豐田通商,并于最近同意出售其在美國投資經(jīng)理Fortress Investment Group的

軟銀旗下的芯片設(shè)計(jì)公司Arm也將在今年晚些時候在美國上市。“這將是迄今為止全球最大的IPO,”Asymmetric Advisors日本股市策略師Amir Anvarzadeh表示。

此次IPO將為軟銀的資金提供巨額資金,軟銀報告稱,截至4月3日的財政年度,愿景基金虧損創(chuàng)紀(jì)錄的31.

Arm最初尋求籌集8億至10億美元。但隨著對半導(dǎo)體芯片的需求“飆升”,Anvarzadeh表示Arm可以籌集高達(dá)50億至60億美元 - 或“軟銀市值的85%”。

他表示,軟銀的股價可能會上漲,盡管這并不能保證其人工智能工作的成功。

“從根本上說,我認(rèn)為軟銀不會改變?nèi)毡镜母窬?.....他們不是日本人工智能的救世主,“他說。

日本電信公司NTT還宣布了本財年開發(fā)自己的LLM的計(jì)劃,旨在為企業(yè)創(chuàng)造“輕量級和高效”的服務(wù)。NTT表示,它將在未來五年內(nèi)向數(shù)據(jù)中心和人工智能等增長領(lǐng)域投入8萬億日元,比以前的投資水平增加50%。

當(dāng)?shù)孛襟w報道稱,數(shù)字廣告公司網(wǎng)絡(luò)代理5月發(fā)布了LLM,使公司能夠創(chuàng)建AI聊天機(jī)器人工具。該公司表示,它是為數(shù)不多的“專門研究日本語言和文化的模型”之一。

雖然日本尚未在生成人工智能領(lǐng)域迎頭趕上,但它正在通過這些私營部門的努力邁出第一步。小島說,一旦建立了“強(qiáng)大的基礎(chǔ)設(shè)施”,剩下的技術(shù)挑戰(zhàn)可能會通過使用開源軟件和以前先驅(qū)者的數(shù)據(jù)來“顯著緩解”。Bloom,F(xiàn)alcon和RedPajama都是開源的LLM,經(jīng)過大量數(shù)據(jù)的訓(xùn)練,可以下載和研究。

然而,小島說,涉足這一領(lǐng)域的公司應(yīng)該預(yù)料到競爭跨越“相對較長的時間范圍”。他解釋說,開發(fā)LLM需要大量的資本投資和在自然語言處理和高性能計(jì)算方面高度熟練的勞動力。

“軟銀和NTT加入這場競爭,短期內(nèi)不會改變?nèi)斯ぶ悄艿母窬帧?/p>

日本的人工智能監(jiān)管

日本科技公司越來越多地參與生成式人工智能開發(fā),這與在其他領(lǐng)域采用人工智能的積極立場相吻合。Teikoku Databank的一項(xiàng)調(diào)查發(fā)現(xiàn),超過60%的日本公司對在其運(yùn)營中使用生成式人工智能持積極態(tài)度,而9.1%的公司已經(jīng)在這樣做。

日立它表示,已經(jīng)建立了一個生成人工智能中心,以促進(jìn)員工安全有效地使用該技術(shù)。該集團(tuán)表示,憑借數(shù)據(jù)科學(xué)家,人工智能研究人員和相關(guān)專家的專業(yè)知識,該中心將制定指導(dǎo)方針,以減輕生成人工智能的風(fēng)險。

日本甚至?xí)紤]政府采用像ChatGPT這樣的人工智能技術(shù),前提是網(wǎng)絡(luò)安全和隱私問題得到解決,內(nèi)閣官房長官Hirokazu Matsuno說。

京都大學(xué)法學(xué)研究生院研究教授Hiroki Habuka說,隨著日本對生成人工智能的使用更加開放,政府應(yīng)該制定和促進(jìn)有關(guān)其使用的軟指導(dǎo)方針,同時評估基于特定風(fēng)險的硬監(jiān)管的必要性。

“如果沒有更明確的指導(dǎo),公司在使用生成人工智能時應(yīng)該采取什么行動,實(shí)踐可能會變得支離破碎,”這位教授說。

贊助本站

人工智能實(shí)驗(yàn)室
相關(guān)內(nèi)容
AiLab云推薦
推薦內(nèi)容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實(shí)驗(yàn)室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務(wù) | 公司動態(tài) | 免責(zé)聲明 | 隱私條款 | 工作機(jī)會 | 展會港