← Run Locally · ሁሉም ሞዴሎች

በmeta-llama

Llama 3.3 70B Instruct

meta-llama/Llama-3.3-70B-Instruct

ሁሉም አሃዞች ግምቶች ናቸው። እውነተኛው የሜሞሪ አጠቃቀም እና ፍጥነት በድራይቨሮችዎ፣ በቅንብሮችዎ እና በሚሠሩ ሌሎች ፕሮግራሞች ላይ ይመሠረታል።

ፓራሜተሮች
71B
ፈቃድ
llama3.3
የታተመበት
ኖቬም 26 2024

ፈቃዱ የሞዴሉ አምራች ነው። ሞዴሉን ከመጠቀምዎ በፊት ውሉን ይመልከቱ።

Hugging Face ይህን ሞዴል ከማውረድዎ በፊት የአምራቹን ውል እንዲቀበሉ ይጠይቃል። ለዚህ ሞዴል ኪት አይሸጥም።

ዋናው በHugging Face ላይ ↗

በኳንታይዜሽን የሚያስፈልግ ሜሞሪ

በ8,192 ቶከኖች ኮንቴክስት፣ ለሩንታይም የሚያስፈልገውን 0.8 GB ጨምሮ።

ኳንታይዜሽንየሞዴል ፋይልድምር
Q4_K_M42.8 GB47.9 GB(ግምታዊ)
Q5_K_M50.2 GB56.0 GB(ግምታዊ)
Q6_K57.9 GB64.4 GB(ግምታዊ)
Q8_075.0 GB83.3 GB(ግምታዊ)
F16141.1 GB156.0 GB(ግምታዊ)

በግራፊክስ ካርዱ ላይ የሚያሄደው ሃርድዌር

በQ4_K_M እና በ8,192 ቶከኖች ኮንቴክስት።

ከምንዘረዝራቸው ሃርድዌሮች ውስጥ በዚህ ቅንብር ሙሉ በሙሉ በግራፊክስ ካርዱ ላይ የሚያሄደው የለም።

በኮምፒውተርዎ ላይ ይመልከቱ

ተመሳሳዩ ሞዴል በኤፒአይ

በጣም ርካሽ ሻጭ፦ NanoGPT፣ በነባሪ አጠቃቀም (በቀን 200 ጥያቄዎች) በወር $0.99።

ዋጋዎቹን በModel Price Map ላይ ይመልከቱ

የሞዴል ዝርዝሮች የተወሰዱት ከHugging Face የሕዝብ ዝርዝሮች ነው (ስሞች፣ መጠኖች፣ ፈቃዶች)። እያንዳንዱ የሞዴል ገጽ ወደ ዋናው ይመራል።

አዲስ ነገሮች

  • አሁን በመረጡት ቋንቋ የሚከፈት ሊንክ ማጋራት ይችላሉ፦ ቋንቋ ሲቀይሩ የገጹ አድራሻ ይዘምናል።