隨著OpenAI推出ChatGPT在人工智能領域掀起的千層浪,生成式AI開始被普羅大眾所熟知。《日本經濟新聞》在此前報道中指出,全球100多家大規模生成式AI企業總市值達480億美元,約為2020年的6倍,OpenAI的確引領了市場對生成式AI企業的投資熱潮。
實際上,除了OpenAI,AI的發展浪潮中還有Jasper、DeepMind、Stability、Cohere等競爭者。5月3日,《紐約時報》報道稱,兩名知情人士透露Cohere已獲2.5億美元融資,估值約20億美元,投資者包括互聯網軟件巨頭Salesforce、芯片制造商Nvidia、多倫多風投公司InoviaCapital和硅谷公司IndexVentures。這是自2022年ChatGPT發布后在生成式AI領域的最新重大投資。而此前,Cohere籌集的總資金已達1.7億美元,包括2022年由TigerGlobal領投的1.25億美元B輪融資。
“百舸爭流,奮楫者先;千帆競發,勇進者勝”。作為加拿大的一家初創企業,Cohere何以突出重圍,斬獲眾多投資者的青睞?了解該企業的發展歷程、其產品區別于ChatGPT的獨特優勢后,相信我們會對投融資市場風向的選擇理由與生成式AI的發展動向有所理解。
一篇著名的論文
創立于2019年的Cohere是一家自然語言處理(NLP)公司,基于大型NLP模型為外界提供API服務,從而提高計算機理解和生成文本、閱讀和寫作的能力。該公司由艾丹·戈麥斯(AidanGomez)與兩個朋友NickFrosst和IvanZhang一起創辦,它的總部位于加拿大多倫多,在美國舊金山、英國倫敦均設有辦事處。自合作以來,他們組建了一支約135人的團隊,目前還在繼續擴建以更好的提供相關API服務。
Richard Teng:新角色甚至算不上晉升,只是擴大了幫助CZ審視某些事情的責任:金色財經報道,Binance新加坡首席執行官Richard Teng在接受采訪時回避了關于他被培養來接替CZ的想法。Teng表示,猜測這種事情為時過早。我只想強調,我們有一個非常強大的管理團隊,有許多強大的領導人在照顧不同的業務部分。我只是很高興能成為其中的一部分,并努力支持公司的議程和愿望。新角色甚至算不上晉升,只是擴大了幫助CZ審視某些事情的責任。
一位要求保持匿名的前Binance員工向CoinDesk表示,高級領導層和監管機構都在閉門討論后認為,Richard Teng 是唯一可以接替 CZ 并繼續按照他的愿景建設公司的領導者同時幫助彌合行業與監管機構之間的現有差距。
金色財經此前報道,彭博社援引知情人士報道,如果趙長鵬因監管困境離職,Richard Teng將會成為下一任幣安CEO。5月下旬,趙長鵬任命Richard Teng擔任美國以外所有區域市場的負責人。[2023/6/5 21:17:00]
兩位聯合創始人AidanGomez和NickFrosst曾擔任過谷歌研究員,其中AidanGomez是大名鼎鼎的《AttentionIsAllYouNeed》論文的作者之一。該論文提出了一種新的、被譽為ChatGPT的“祖師爺”的網絡架構“Transformer”,ChatGPT通過Transformer模型進行了序列建模,并通過自回歸方式進行訓練,使得大語言模型能夠根據前文內容和當前輸入,生成符合語法規則和語義邏輯的擬人化內容,這使得國內外都掀起了一波未平一波又起的大規模語言模型訓練的熱潮。
巴厘島將打擊使用加密貨幣作為支付方式的外國游客:5月29日消息,巴厘島政府將打擊外國游客在酒店、餐館、旅游景點、購物中心和其他地方使用加密貨幣作為支付手段。巴厘島州長 Wayan Koster 表示:外國游客行為不當,從事簽證許可中不允許的活動、使用加密貨幣作為支付手段以及違反其他規定的行為將得到堅決處理。嚴厲的措施包括驅逐出境、行政制裁、刑事處罰、關閉營業場所和其他嚴厲制裁。[2023/5/29 9:48:38]
Cohere提供了與ChatGPT類似的產品,目前主要包括:搜索文本、分類文本和生成文本三大類產品,幫助企業快速部署對話式AI聊天機器人、生成式搜索引擎、文本摘要總結、增強向量搜索等,是為數不多在技術層面具備與OpenAI進行競爭的AI企業之一,這也是其受到資本市場青睞的重要原因之一。
Cohere曾在2021年9月獲得4000萬美元A輪融資;2022年2月獲得1.25億美元B輪融資,投資者包括老虎環球基金、“AI教父”GeoffreyHinton、斯坦福大學教授李飛飛、深度學習專家PieterAbbeel等。在2022年10月,Cohere便開始與谷歌、Salesforce、Nvidia進行融資談判,如今,Cohere獲得巨額融資將繼續與OpenAI展開激烈競爭,繼續加快類似ChatGPT產品的技術創新和更新迭代。
美聯儲6月加息的可能性上升至40%左右:金色財經報道,美聯儲掉期數據顯示,美聯儲6月加息的可能性上升至40%左右。此前,美聯儲洛根表示,目前的數據不足以證明需要暫停加息。[2023/5/18 15:12:02]
資本為何青睞?
實際上,在OpenAI發布GPT-4之后的一段時間內,大部分人都將目光聚焦于AI大模型,包括Anthropic、AI21、Cohere和Character.AI在內的眾多資金充足的初創公司都在投入大量資源來構建更大的算法和模型,以期待努力趕上OpenAI的技術。
但就在AI競賽如火如荼開展之時,OpenAI的首席執行官SamAltman卻表示巨型AI模型的時代已結束,“未來新一步的進化,將不會來自于巨型模型”。那同屬該領域的Cohere又為何會獲得資本的青睞呢?
CohereAI將其模型分為兩類:生成模型和嵌入模型。生成模型通過對互聯網上大量的數據進行訓練,而嵌入模型是多語言支持的,可以支持超過109種語言。Cohere的模型有不同的規格,公司的指令模型每周都在進步,而同類領域的其他提供商通常要幾個月或甚至一年才會發布重要的模型更新。
盡管CohereAI與谷歌合作獲取其硬件能力,但其并不僅限于GoogleCloud。例如,Cohere在AWSSageMaker上運營,并計劃在其他云服務提供商上提供服務。CohereAI的方法非常開放,并以客戶為中心,他們通過在任何云供應商上運行以使客戶獲得最佳體驗和服務。
拜登政府著手研究是否需要對AI工具進行審查:4月11日消息,拜登政府已經開始研究是否需要對ChatGPT等人工智能工具進行審查,因為人們越來越擔心這種技術可能造成歧視或傳播有害信息。作為潛在監管的第一步,美國商務部周二正式公開征求意見,就其所謂的問責措施發表意見,包括有潛在風險的新AI模型在發布前是否應該通過認證程序。(華爾街日報)[2023/4/11 13:56:24]
相較于GPT-4,CohereAI尚未采用多模態方法。CohereAI的高級副總裁SaurabhBaji表示,“我認為圖像和視頻非常令人興奮。但從商業角度來看,這也是一個不同的問題。我們并不關注AGI,而是專注于客戶實際面臨的問題。很多客戶的需求都非常以語言為中心。”
從AI競爭格局的角度來看,CohereAI和OpenAI都是目前AI領域的重要參與者。雖然兩家公司都專注于大型語言模型,但它們的重點和方法略有不同。OpenAI在一系列領域都有所涉獵,包括自然語言處理、計算機視覺和強化學習等。此外,OpenAI也吸引了大量的資本,其中包括像微軟、谷歌和亞馬遜這樣的科技巨頭。
相比之下,CohereAI專注于提供易于使用和部署的大型語言模型,為企業客戶提供更好的商業解決方案。盡管CohereAI在規模和影響力上與OpenAI存在一定的差距,但其在語言模型方面的專注度和靈活性使其成為一個非常有前途的公司。
另外,在資本方面,CohereAI也獲得了很多青睞。除了幾個知名風險投資公司的支持,該公司還獲得了加拿大政府和Google等科技巨頭的支持。這些資金的注入有助于CohereAI繼續擴展其業務和規模,并在AI市場上取得更大的份額。
報告:逾三分之一的亞太區機構計劃將區塊鏈技術納入其反賄賂和貪污項目中:7月6日消息,利用數據、技術和洞察來幫助客戶滿足有關風險、治理和增長方面的復雜需求的供貨商德安華近日發表2022年反賄賂和貪污基準報告。
報告顯示,超過三分之一(35%)的亞太區機構計劃將區塊鏈技術納入其反賄賂和貪污(ABC)計劃。另外,認為與企業無關和對技術缺乏了解則為對ABC卻步的主要原因。(36氪)[2022/7/6 1:55:00]
總的來說,雖然CohereAI和OpenAI在AI競爭格局中處于不同的位置,但它們都是這個領域中非常有前途的公司。CohereAI在語言模型方面的專注度和靈活性使其成為一個與OpenAI進行競爭的關鍵因素之一,而資本的支持也給了CohereAI更多的機會來發揮其潛力,并在市場上取得更大的份額。
實用角度看大語言模型
大語言模型是一類基于深度學習技術的自然語言處理模型,它們具有大量的參數,并能夠理解和生成人類語言。這類模型通常采用神經網絡架構,尤其是Transformer架構。
近期,一篇綜述論文《在實踐中利用大模型的力量》在AI學術圈爆火,而其中一張名為“大預言模型進化樹”的圖片引起了不小的轟動,其梳理了2018年到2023年的大預言模型代表作。
相較于OpenAI不斷深耕至今走向AI的前沿,曾經頗具影響力的谷歌BERT似乎從一開始就走向了“岔路”。當我們以年為單位看LLM發展史的時候,忍不住唏噓“在大模型沒有成功之前,一切都是場賭局”。
大語言模型發展進化史
2017年的時候,谷歌研究員在《Attentionisallyouneed》一文中介紹了Transformer架構——這也是目前最常用到的架構之一,是BERT、GPT等預訓練模型的基礎。時至今日,Transformer架構仍是GPT模型的基礎架構。
Transformer架構的提出和預訓練的方法將大語言模型推向了新的階段——以谷歌為首的科技大公司在2017年后聚焦于研發能夠處理多種自然語言任務的大模型。
2018年6月,OpenAI采用Transformer架構發布了它們的模型——GPT-1。緊接著,谷歌正式向世界介紹了全新預訓練模型——BERT。
時間來到2019年,微軟宣布與OpenAI達成10億美金的合作。次年9月,OpenAI授權微軟使用GPT-3模型,微軟成為全球首個享用GPT-3能力的公司。
科技巨頭Meta當然也不甘示弱,于2022年推出有著“開源版本的GPT-3”之稱的OPT,并于今年推出能在單個GPU上運行的大語言模型LLaMA。
如今GPT-4也已發布,更強的文本生成能力與詳細的邏輯判斷能力讓OpenAI在四年內快速崛起,并成功“破圈”。
Cohere的聯合創始人NickFrosst對Altman認為大模型不會永遠奏效的觀點也是表示認同的,他表示“有很多方法可以讓Transformer變得更好、更有用,而且很多方法并不涉及向模型添加參數”。Frosst還說,新的AI模型設計或架構,以及基于人類反饋的進一步優化,將會是許多人工智能研究人員已經在探索和有前途的方向。
一些有前景的LLM用例
利用LLM大模型可以做許多“很酷”的事情,但我們必須承認,基于人類實際需求的創新發展方向才是最根本的邏輯,所以“實用主義”是我們考量LLM應用的重要指標。
對于到底是選擇只經過預訓練的大模型LLM,還是在此基礎上經過特定數據集微調后的較小模型問題,《在實踐中利用大模型的力量》這篇論文給出的答案是具體情況具體分析,我們可以參照這張決策流程思維導圖來獲得一些啟示。
各種基于LLM構建的應用程序在不斷刷新我們的認知,計算機科學家ChipHuyen在其文章《為生產構建LLM應用程序》中為我們提供了一些有前景的LLM用例:
人工智能助手:針對不同用戶群體來構建不同的任務,比如安排日程、做筆記、預訂航班、購物等。但是,最終目標是打造一個可以幫助你做任何事情的智能助手。
聊天機器人:聊天機器人在API方面類似于人工智能助手。如果說人工智能助手的目標是完成用戶交給它的任務,那么聊天機器人的目標更多的是成為一個伴侶。例如,你可以讓聊天機器人像名人、電影角色、作家等一樣說話。
學習:ChatGPT不僅可以生成問題,還可以評估學生輸入的答案是否正確,以及對論文進行評分和反饋。同時,它也很擅長在同一個辯論話題上采取不同的立場,可以成為學生很好的辯論伙伴。
搜索引擎優化:如今,許多公司都依賴于創造大量內容,希望在谷歌上排名靠前。但在未來,搜索引擎優化可能會變得更像一場貓捉老鼠的游戲:搜索引擎會想出新的算法來檢測人工智能生成的內容,而公司則會更好地繞過這些算法。人們可能也會減少對搜索的依賴,而更多地依賴品牌。
除此之外,大語言模型可以幫助生命科學研究人員更好地理解蛋白質、分子、DNA和RNA,幫助信用卡公司進行異常檢測和欺詐分析以保護消費者,幫助法律團隊進行法律釋義和抄寫等。
在未來的模型面前,或許現在我們看到的大模型只是螻蟻。但我們可以期待,未來更加強大的語言模型將會更徹底改變人們的生活方式。
現在,我們可以看到越來越多的企業涌入AI的洪流,個體也不可避免地主動參與或者被席卷進去,我們永遠不知道明天會發生什么。未來的另一個五年又會有多少大語言模型出現,誰又將沖在行業最前端呢?讓我們拭目以待。
阿里云的觸手正在向幣圈延伸。幾天前,阿里云與Avalanche區塊鏈和MUADAO聯合推出Cloudverse,為想要在鏈上部署元宇宙的企業提供一站式解決方案.
1900/1/1 0:00:00原文作者:0x?min&David?原文來源:TechFlowResearchOrdinals和BRC-20成功刮起“在比特幣上發行資產”的風潮,但顯然它可能并不是最后一個.
1900/1/1 0:00:00黃尹旭:中國人民大學交叉科學研究院講師、法學博士 要目 一、問題的提出? 二、Web2.0架構中“圍墻花園”式壟斷源起:中心化的平臺力量三、破除Web2.
1900/1/1 0:00:00作者:TharmLertviwatkul,nansen 關鍵要點 ?目前信標鏈上有?1930?萬個?ETH(包括獎勵),相當于?Shapella?升級期間信標鏈上的?ETH?數量.
1900/1/1 0:00:00本文來源:人民雄安網,記者:胡宇濃、張子怡雄安新區區塊鏈底層系統今日在雄安區塊鏈論壇上發布。這標志著國內首個城市級區塊鏈底層操作系統開發完成投入使用.
1900/1/1 0:00:00在過去幾年中,RWA的敘事一直處于沉寂狀態,但最近它開始走紅。許多傳統金融機構都開始布局RWA領域,如J.P.Morgan在Polygon區塊鏈上使用日元和新加坡元的代幣化版本執行了第一筆實時交.
1900/1/1 0:00:00