Görsel kaynağı: Unbounded AI tarafından oluşturuldu
Son altı ayda OpenAI, GPT ile herkesi şaşırttı.
İnsanlar genellikle GPT'nin doğuşunun yeni çağın "iPhone" anı olduğuna inanır, tıpkı iPhone'un insanları mobil İnternet çağına getirmesi gibi, o da yapay zeka büyük modellerin yeni çağının kapı anahtarı olacak.
Bununla birlikte, ** mobil İnternet'in patlayan sürecinde, yalnızca iPhone'un başarıları değil, aynı zamanda Android'in ve arkasındaki büyük Android kampı cep telefonu üreticilerinin başarıları da var. **
Hatta sadece gönderiler açısından bakıldığında, Android kampının mobil internet çağına katkısı daha büyük görünüyor.
**Ve şimdi yapay zeka büyük dil modeline ait "Android anı" geliyor. **
18 Temmuz yerel saatinde, Pekin saatine göre sabahın erken saatlerinde Meta, en yeni nesil açık kaynaklı büyük model Llama 2'yi piyasaya sürdü.
Meta'nın resmi internet sitesinde yer alan herkese açık verilere göre bu sefer yayınlanan Llama 2 model serisinde 7 milyar, 13 milyar ve 70 milyar olmak üzere üç parametreli varyant modeller yer alıyor.
Llama 2, 2 trilyon jetonla eğitildi ve 1 milyondan fazla manuel açıklamalı veriye sahip. Llama 1 ile karşılaştırıldığında, Llama 2 %40 daha fazla eğitim verisine ve iki kat daha fazla bağlam uzunluğuna sahiptir.
Bu yükseltmeden sonra, Meta'nın yayınlanan makalelerine göre, Llama 2, çeşitli büyük ölçekli model testlerinde hala GPT-3.5'ten daha düşük olmasına rağmen, mevcut açık kaynaklı büyük ölçekli modelin çalışma puanlarıyla karşılaştırıldığında, şimdiden genel olarak katledilen bir seviyeye ulaştı.Performans.
Llama 2'nin koşu puanlarının GPT ve PaLM ile karşılaştırılması
Llama 2 ve diğer açık kaynaklı büyük model çalıştırma puanlarının karşılaştırılması
Belki de Llama 2'nin GPT-3.5'ten daha düşük olduğunu gördüğünüzde küçümseyeceksiniz, sonuçta ikincisi 4.0 sürümüne evrildi.
Bununla birlikte, Android ilk piyasaya sürüldüğünde, aynı zamanda çok kasıksız olduğunu ve açık kaynağın, Android kampının artık iPhone ile rekabet etmesine izin verdiğini anlamalısınız. **
Bu nedenle, Llama 2'nin piyasaya sürülmesinin en büyük özelliği aslında:
**Meta, açık kaynak bazında bir adım daha ileri giderek, modelin ticari olarak serbestçe kullanılmasına olanak tanır. ** (Aylık 700 milyondan fazla aktif kullanıcısı olan ürünlerin ticari izin için ayrıca başvurması gerekir, ancak çok az şirket bu standardı karşılayabilir)
Turing Ödülü sahibi ve Meta'nın baş bilimcisi Yang Likun da Twitter'da bunun büyük dil modeli pazarının modelini değiştireceğini söyledi:
Zhiwei'nin yazı işleri departmanı, hem akademik çevrede hem de açık kaynak topluluğunda oldukça etkili olan Zhiyuan AI Araştırma Enstitüsü ile de temasa geçti.Onların değerlendirmesi:
**Açık kaynak tek yol. Llama 2'nin piyasaya sürülmesinin "Android anı" olduğunu söylemek mantıksız değil. Piyasayı işgal etmek için açık kaynağı kullanmak bir rekabet stratejisidir. **
Llama 2'nin ticari açık kaynağına karşılık gelen OpenAI'nin açık kaynağa karşı tutumu her zaman belirsiz olmuştur.
Açık kaynak veya açık kaynak hareketi resmen 1990'ların sonlarında başladı.Katılımcılar açık kaynak koduna, bilgi paylaşımına ve ücretsiz yazılım kullanımına inandılar.
Android'in yükselişi ve GitHub'ın popülaritesi, açık kaynaktan ayrılamaz. Linux sistemi de bu hareket dalgasında doğdu.Günümüzün yönlendiricileri, anahtarları, akıllı çamaşır makineleri, akıllı pilav pişiricileri, anahtarları, sunucuları ve diğer cihazları hemen hemen her türlü Linux sistemi ile donatılmıştır.
Amerikan Mars gezicisinin birkaç yıl önce başarılı bir şekilde iniş yapması da dahil olmak üzere, Mars'ın Linux bilgisayarlarının sayısının Windows'u geçtiği ikinci gezegen haline geldiğini de sembolize ediyor.
Açık kaynağın bugün yazılımın işbirliği ve yenilik modelini değiştirdiğini ve teknoloji ortamını değiştirdiğini söylemek abartı olmaz.
Ancak büyük dil modelleri alanında lider OpenAI, isim olarak Open'a ters düşüyor gibi görünüyor.
OpenAI'nin kurucusu Sam Altman, gelecekte GPT-3 ve GPT-4'ün kaynak kodunu açacağını kamuoyu önünde defalarca belirtmiş olsa da** bu, şu ana kadar boş bir çek. **
Musk, OpenAI'den çekildikten sonra bile, OpenAI'nin devasa kârlarından memnun kalmayarak ve kaynağı kademeli olarak kapatarak, OpenAI'yi birçok kez alenen bombaladı.
OpenAI'nin baş bilim adamı Sutskever, erken açık kaynağın OpenAI'nin teknolojideki lider konumunu kaybetmesine neden olacağını ve büyük dil modelinin gücünün çok büyük olduğunu ve açık kaynağın güvenlik riskleri olabileceğini söyledi.
Musk, OpenAI'nin Açık olup olmadığını sorguladı
OpenAI'nin açık kaynak karşısındaki çekingenliğinin aksine Meta, açık kaynağın sadık bir destekçisidir ve yapay zekanın tarihsel sürecini bir dereceye kadar desteklemiştir.
Ve Meta'nın bugünkü kararının Meta'nın baş bilim adamı Yang Likun ile bir ilgisi olmalı.
2014 gibi erken bir tarihte Zuckerberg, AI olasılığını fark etti.DeepMind nihayet Google tarafından satın alındıktan sonra, Zuckerberg arkasını döndü ve AI akademik alanında bir kodaman olan Yang Likun'u buldu.
Ünlü Bell Laboratuarlarında çalışmış olan Yang Likun, "Evrişimli Sinir Ağı"nın geliştiricilerinden biriydi ve o zamanlar New York'ta ders veriyordu.
VOX raporlarına göre Zuckerberg, harika bir at olan Yang Likun'u elde edebilmek için bilimsel araştırma sonuçlarının açık kaynak olması, laboratuvarın New York'ta kurulması ve deney ekibinin kârlılığı düşünmesine gerek olmadığına dair söz verdi.
Yang Likun, görev süresi boyunca dünyaca ünlü AI çerçevesi Pytorch'u geliştirmek, GAN'ı (üretken yüzleşme ağı) geliştirmek, büyük dil modeli Llama'yı ve AI görüntü modeli SAM'i başlatmak gibi çok şey başardı.
**O yıllarda anlaşmaya varıldığı gibi, bu projelerin tümü açık kaynak kodluydu. **
Büyük dil modelleri dalgası altında, Llama büyük dil modeli de açık kaynak topluluğunda oldukça popülerdir.
Hugging Face gibi açık kaynak topluluklarında, sihirli bir şekilde değiştirilmiş her türden alpaka vardır (Llama'nın Çince çevirisi alpakadır).
Stanford'un Alpaca'sı, UCB'nin Vicuna'sı dahil... LlamA'ya dayalı çeşitli değiştirilmiş modeller ortaya çıktı.
Birçok büyük modelde, GPT-3.5 ve GPT-4 altında, neredeyse tüm alpaka ailesi kesim listelerinde.
Ayrıca Yang Likun, güvenlik nedeniyle OpenAI'nin kapalı kaynak gerekçelerine katılmıyor.
Ona göre, bir AI platformunu güvenli, iyi ve kullanışlı hale getirmenin tek yolu, onu açık kaynak yapmaktır. **
Başka bir deyişle, teknolojinin birkaç kişinin elinde olması tehlikelidir, ancak yapay zekayı denetleyecek gücün aynı anda gelişmesine izin verilerek yapay zeka mümkün olduğunca kontrol edilebilir.
Şu anda, şimdilik yalnızca açık kaynak bunu yapabilir.
Genel olarak, OpenAI liderliğindeki büyük dil modelleri dalgasında, Meta liderliğindeki açık kaynak ordusu, açık kaynak topluluğundaki şehirlere ve topraklara çılgınca saldırıyor.
Öte yandan, açık kaynak ile kapalı kaynak arasındaki çatışma giderek kızışıyor.
Bu yılın Mayıs ayında, bir Google araştırmacısı tarafından "yanlışlıkla" sızdırılan bir not savaşı masaya yatırdı.
Zhiwei'nin yazı işleri departmanı, Google araştırmacılarının bu notta bahsettiği kilit noktaları kısaca özetledi:
① Açık kaynaklı AI, Google ve Open AI topraklarına giriyor;
②Küçük modeller, büyük modellerden daha rekabetçidir;
③ Veri kalitesi, veri miktarından çok daha önemlidir;
④Google açık kaynağı yenemez;
⑤ Google'ın bir açık kaynak ekosistemine, açık kaynağın Google'a olan ihtiyacından daha fazla ihtiyacı vardır.
Kısaca ifade etmek gerekirse, binlerce kelimeden oluşan bu anlamlı makale, temel bir mesajı ortaya koyuyor:
** Açık kaynak karşısında ne Google'ın ne de OpenAI'nin hendeği yoktur. **
Dolayısıyla, bu sefer yayınlanan Llama 2'ye dönüp baktığımızda, Meta, kapalı kaynak kampı için gerçekten başka bir ordu olan ticari kullanım üzerindeki kısıtlamaları doğrudan kaldırdı.
Açık kaynaklı Llama2 yalnızca ücretsiz olmakla kalmaz, aynı zamanda çoğu ticari şirketin düşük maliyetli ve kişiselleştirilmiş ihtiyaçlarını karşılamak için geliştiricilerin bunu kendi kendilerine ayarlamasına olanak tanır.
Ancak, sonunda, açık kaynak ve kapalı kaynak arasında kazanan kim, Zhiwei yazı işleri departmanı bir sonuca varmanın kolay olmadığını düşünüyor.
Sonuçta, açık kaynak her derde deva değildir.İyi ve kötü geliştiriciler vardır ve bazı kamu güvenliği riskleri vb. açık kaynağın sıklıkla karşılaştığı sorunlardır.
Son tahlilde açık kaynak ile kapalı kaynak arasındaki rekabet farklı bir rekabet stratejisidir.Biri pazarı genişletmeye ve standartları belirlemeye, diğeri ise karlılığa ve teknolojiye öncülük etmeye daha çok önem verir.
Örneğin, Android ve iOS, Linux ve Windows sonunda gerçekten kazanmayabilir veya kaybetmeyebilir, ancak farklı ihtiyaçlar altında kendi makul konumlarını bulabilirler.
Bununla birlikte, Llama 2'nin tüm piyasayı karıştırdığına ve ekolojide ince değişikliklere neden olduğuna şüphe yok:
① OpenAI hissedarlarından Microsoft bu kez Llama 2'nin tercih edilen ortağı oldu ve Microsoft her iki tarafa da bahis oynuyor gibi görünüyor.
② Meta, Llama 2'nin Qualcomm çiplerinde çalışabileceğini duyurdu ki bu, AI çiplerinin efendisi Nvidia için kesinlikle bir meydan okuma olacak.
Kısacası, büyük dil modeli çemberindeki drama, giderek daha karmaşık ve ilginç hale geliyor.
Llama 2'nin neden olduğu çamurlu su, AI çağının daha erken gelmesini sağlıyorsa, lütfen bunun sadece Meta'nın değil, aynı zamanda açık kaynak topluluğunun da kredisi olduğunu unutmayın.
View Original
This page may contain third-party content, which is provided for information purposes only (not representations/warranties) and should not be considered as an endorsement of its views by Gate, nor as financial or professional advice. See Disclaimer for details.
Açık kaynak karşısında OpenAI'nin hendeği yok: Bugün, büyük modelin Android anı burada
Orijinal kaynak: Zhiwei
Son altı ayda OpenAI, GPT ile herkesi şaşırttı.
İnsanlar genellikle GPT'nin doğuşunun yeni çağın "iPhone" anı olduğuna inanır, tıpkı iPhone'un insanları mobil İnternet çağına getirmesi gibi, o da yapay zeka büyük modellerin yeni çağının kapı anahtarı olacak.
Bununla birlikte, ** mobil İnternet'in patlayan sürecinde, yalnızca iPhone'un başarıları değil, aynı zamanda Android'in ve arkasındaki büyük Android kampı cep telefonu üreticilerinin başarıları da var. **
Hatta sadece gönderiler açısından bakıldığında, Android kampının mobil internet çağına katkısı daha büyük görünüyor.
**Ve şimdi yapay zeka büyük dil modeline ait "Android anı" geliyor. **
18 Temmuz yerel saatinde, Pekin saatine göre sabahın erken saatlerinde Meta, en yeni nesil açık kaynaklı büyük model Llama 2'yi piyasaya sürdü.
Meta'nın resmi internet sitesinde yer alan herkese açık verilere göre bu sefer yayınlanan Llama 2 model serisinde 7 milyar, 13 milyar ve 70 milyar olmak üzere üç parametreli varyant modeller yer alıyor.
Llama 2, 2 trilyon jetonla eğitildi ve 1 milyondan fazla manuel açıklamalı veriye sahip. Llama 1 ile karşılaştırıldığında, Llama 2 %40 daha fazla eğitim verisine ve iki kat daha fazla bağlam uzunluğuna sahiptir.
Belki de Llama 2'nin GPT-3.5'ten daha düşük olduğunu gördüğünüzde küçümseyeceksiniz, sonuçta ikincisi 4.0 sürümüne evrildi.
Bununla birlikte, Android ilk piyasaya sürüldüğünde, aynı zamanda çok kasıksız olduğunu ve açık kaynağın, Android kampının artık iPhone ile rekabet etmesine izin verdiğini anlamalısınız. **
Bu nedenle, Llama 2'nin piyasaya sürülmesinin en büyük özelliği aslında:
**Meta, açık kaynak bazında bir adım daha ileri giderek, modelin ticari olarak serbestçe kullanılmasına olanak tanır. ** (Aylık 700 milyondan fazla aktif kullanıcısı olan ürünlerin ticari izin için ayrıca başvurması gerekir, ancak çok az şirket bu standardı karşılayabilir)
Turing Ödülü sahibi ve Meta'nın baş bilimcisi Yang Likun da Twitter'da bunun büyük dil modeli pazarının modelini değiştireceğini söyledi:
**Açık kaynak tek yol. Llama 2'nin piyasaya sürülmesinin "Android anı" olduğunu söylemek mantıksız değil. Piyasayı işgal etmek için açık kaynağı kullanmak bir rekabet stratejisidir. **
Llama 2'nin ticari açık kaynağına karşılık gelen OpenAI'nin açık kaynağa karşı tutumu her zaman belirsiz olmuştur.
Açık kaynak veya açık kaynak hareketi resmen 1990'ların sonlarında başladı.Katılımcılar açık kaynak koduna, bilgi paylaşımına ve ücretsiz yazılım kullanımına inandılar.
Android'in yükselişi ve GitHub'ın popülaritesi, açık kaynaktan ayrılamaz. Linux sistemi de bu hareket dalgasında doğdu.Günümüzün yönlendiricileri, anahtarları, akıllı çamaşır makineleri, akıllı pilav pişiricileri, anahtarları, sunucuları ve diğer cihazları hemen hemen her türlü Linux sistemi ile donatılmıştır.
Amerikan Mars gezicisinin birkaç yıl önce başarılı bir şekilde iniş yapması da dahil olmak üzere, Mars'ın Linux bilgisayarlarının sayısının Windows'u geçtiği ikinci gezegen haline geldiğini de sembolize ediyor.
Ancak büyük dil modelleri alanında lider OpenAI, isim olarak Open'a ters düşüyor gibi görünüyor.
OpenAI'nin kurucusu Sam Altman, gelecekte GPT-3 ve GPT-4'ün kaynak kodunu açacağını kamuoyu önünde defalarca belirtmiş olsa da** bu, şu ana kadar boş bir çek. **
Musk, OpenAI'den çekildikten sonra bile, OpenAI'nin devasa kârlarından memnun kalmayarak ve kaynağı kademeli olarak kapatarak, OpenAI'yi birçok kez alenen bombaladı.
OpenAI'nin baş bilim adamı Sutskever, erken açık kaynağın OpenAI'nin teknolojideki lider konumunu kaybetmesine neden olacağını ve büyük dil modelinin gücünün çok büyük olduğunu ve açık kaynağın güvenlik riskleri olabileceğini söyledi.
OpenAI'nin açık kaynak karşısındaki çekingenliğinin aksine Meta, açık kaynağın sadık bir destekçisidir ve yapay zekanın tarihsel sürecini bir dereceye kadar desteklemiştir.
Ve Meta'nın bugünkü kararının Meta'nın baş bilim adamı Yang Likun ile bir ilgisi olmalı.
2014 gibi erken bir tarihte Zuckerberg, AI olasılığını fark etti.DeepMind nihayet Google tarafından satın alındıktan sonra, Zuckerberg arkasını döndü ve AI akademik alanında bir kodaman olan Yang Likun'u buldu.
Ünlü Bell Laboratuarlarında çalışmış olan Yang Likun, "Evrişimli Sinir Ağı"nın geliştiricilerinden biriydi ve o zamanlar New York'ta ders veriyordu.
Yang Likun, görev süresi boyunca dünyaca ünlü AI çerçevesi Pytorch'u geliştirmek, GAN'ı (üretken yüzleşme ağı) geliştirmek, büyük dil modeli Llama'yı ve AI görüntü modeli SAM'i başlatmak gibi çok şey başardı.
**O yıllarda anlaşmaya varıldığı gibi, bu projelerin tümü açık kaynak kodluydu. **
Büyük dil modelleri dalgası altında, Llama büyük dil modeli de açık kaynak topluluğunda oldukça popülerdir.
Hugging Face gibi açık kaynak topluluklarında, sihirli bir şekilde değiştirilmiş her türden alpaka vardır (Llama'nın Çince çevirisi alpakadır).
Stanford'un Alpaca'sı, UCB'nin Vicuna'sı dahil... LlamA'ya dayalı çeşitli değiştirilmiş modeller ortaya çıktı.
Ona göre, bir AI platformunu güvenli, iyi ve kullanışlı hale getirmenin tek yolu, onu açık kaynak yapmaktır. **
Başka bir deyişle, teknolojinin birkaç kişinin elinde olması tehlikelidir, ancak yapay zekayı denetleyecek gücün aynı anda gelişmesine izin verilerek yapay zeka mümkün olduğunca kontrol edilebilir.
Şu anda, şimdilik yalnızca açık kaynak bunu yapabilir.
Genel olarak, OpenAI liderliğindeki büyük dil modelleri dalgasında, Meta liderliğindeki açık kaynak ordusu, açık kaynak topluluğundaki şehirlere ve topraklara çılgınca saldırıyor.
Öte yandan, açık kaynak ile kapalı kaynak arasındaki çatışma giderek kızışıyor.
Bu yılın Mayıs ayında, bir Google araştırmacısı tarafından "yanlışlıkla" sızdırılan bir not savaşı masaya yatırdı.
① Açık kaynaklı AI, Google ve Open AI topraklarına giriyor;
②Küçük modeller, büyük modellerden daha rekabetçidir;
③ Veri kalitesi, veri miktarından çok daha önemlidir;
④Google açık kaynağı yenemez;
⑤ Google'ın bir açık kaynak ekosistemine, açık kaynağın Google'a olan ihtiyacından daha fazla ihtiyacı vardır.
Kısaca ifade etmek gerekirse, binlerce kelimeden oluşan bu anlamlı makale, temel bir mesajı ortaya koyuyor:
** Açık kaynak karşısında ne Google'ın ne de OpenAI'nin hendeği yoktur. **
Dolayısıyla, bu sefer yayınlanan Llama 2'ye dönüp baktığımızda, Meta, kapalı kaynak kampı için gerçekten başka bir ordu olan ticari kullanım üzerindeki kısıtlamaları doğrudan kaldırdı.
Açık kaynaklı Llama2 yalnızca ücretsiz olmakla kalmaz, aynı zamanda çoğu ticari şirketin düşük maliyetli ve kişiselleştirilmiş ihtiyaçlarını karşılamak için geliştiricilerin bunu kendi kendilerine ayarlamasına olanak tanır.
Ancak, sonunda, açık kaynak ve kapalı kaynak arasında kazanan kim, Zhiwei yazı işleri departmanı bir sonuca varmanın kolay olmadığını düşünüyor.
Sonuçta, açık kaynak her derde deva değildir.İyi ve kötü geliştiriciler vardır ve bazı kamu güvenliği riskleri vb. açık kaynağın sıklıkla karşılaştığı sorunlardır.
Son tahlilde açık kaynak ile kapalı kaynak arasındaki rekabet farklı bir rekabet stratejisidir.Biri pazarı genişletmeye ve standartları belirlemeye, diğeri ise karlılığa ve teknolojiye öncülük etmeye daha çok önem verir.
Örneğin, Android ve iOS, Linux ve Windows sonunda gerçekten kazanmayabilir veya kaybetmeyebilir, ancak farklı ihtiyaçlar altında kendi makul konumlarını bulabilirler.
Bununla birlikte, Llama 2'nin tüm piyasayı karıştırdığına ve ekolojide ince değişikliklere neden olduğuna şüphe yok:
① OpenAI hissedarlarından Microsoft bu kez Llama 2'nin tercih edilen ortağı oldu ve Microsoft her iki tarafa da bahis oynuyor gibi görünüyor.
② Meta, Llama 2'nin Qualcomm çiplerinde çalışabileceğini duyurdu ki bu, AI çiplerinin efendisi Nvidia için kesinlikle bir meydan okuma olacak.
Kısacası, büyük dil modeli çemberindeki drama, giderek daha karmaşık ve ilginç hale geliyor.
Llama 2'nin neden olduğu çamurlu su, AI çağının daha erken gelmesini sağlıyorsa, lütfen bunun sadece Meta'nın değil, aynı zamanda açık kaynak topluluğunun da kredisi olduğunu unutmayın.