დღეს სიამაყით ვაცხადებთ „Train on DGX Cloud“-ის გაშვებას, Hugging Face Hub-ის ახალი სერვისის, რომელიც ხელმისაწვდომია Enterprise Hub ორგანიზაციებისთვის. „Train on DGX Cloud“ აადვილებს ღია მოდელების გამოყენებას NVIDIA DGX Cloud-ის მაღალსიჩქარიანი გამოთვლითი ინფრასტრუქტურის საშუალებით. ჩვენ ერთობლივად შევქმენით „Train on DGX Cloud“, რათა Enterprise Hub-ის მომხმარებლებს მარტივად შეეძლოთ უახლეს NVIDIA H100 Tensor Core GPU-ებზე წვდომა და პოპულარული გენერაციული AI მოდელების, როგორებიცაა Llama, Mistral და Stable Diffusion, დაზუსტება მხოლოდ რამდენიმე დაწკაპუნებით Hugging Face Hub-ის ფარგლებში. ეს ახალი გამოცდილება აფართოებს შარშან გამოცხადებულ სტრატეგიულ პარტნიორობას, რომელიც მიზნად ისახავდა ღია გენერაციული AI მოდელების ტრენინგისა და განლაგების გამარტივებას NVIDIA-ს აჩქარებულ გამოთვლებზე. დეველოპერებისა და ორგანიზაციების ერთ-ერთი მთავარი პრობლემაა GPU-ების ხელმისაწვდომობის სიმცირე და AI მოდელებისთვის ტრენინგის სკრიპტების წერის, ტესტირებისა და გამართვის შრომატევადი პროცესი. „Train with DGX Cloud“ ამ გამოწვევების მარტივ გადაწყვეტას გვთავაზობს, უზრუნველყოფს რა NVIDIA GPU-ებზე მყისიერ წვდომას, დაწყებული H100-ით NVIDIA DGX Cloud-ზე. გარდა ამისა, „Train with DGX Cloud“ გთავაზობთ ტრენინგის ამოცანების შექმნის მარტივ, „no-code“ გამოცდილებას, რომელიც Hugging Face AutoTrain-ისა და Hugging Face Spaces-ის საშუალებით ხორციელდება. Enterprise Hub-ის ორგანიზაციებს შეუძლიათ თავიანთ გუნდებს მიანიჭონ მყისიერი წვდომა მძლავრ NVIDIA GPU-ებზე, გადახდა ხდება მხოლოდ ტრენინგის ამოცანებისთვის გამოყენებული გამოთვლითი ინსტანციების წუთობრივი მოხმარების მიხედვით. „„Train on DGX Cloud“ არის გენერაციული AI მოდელების ტრენინგის უმარტივესი, უსწრაფესი და ყველაზე ხელმისაწვდომი გზა, რომელიც აერთიანებს მძლავრ GPU-ებზე მყისიერ წვდომას, „pay-as-you-go“ სისტემას და „no-code“ ტრენინგს,“ – აცხადებს აბჰიშეკ ტაკური, Hugging Face AutoTrain-ის შემქმნელი. „ეს ყველგან მონაცემთა მეცნიერებისთვის თამაშის წესებს შეცვლის!“ „დღეს Hugging Face Autotrain-ის გაშვება DGX Cloud-ის მხარდაჭერით მნიშვნელოვანი ნაბიჯია AI მოდელების ტრენინგის გამარტივებისკენ,“ – განაცხადა ალექსის ბიორლინმა, NVIDIA DGX Cloud-ის ვიცე-პრეზიდენტმა. „NVIDIA-ს ღრუბლოვანი AI სუპერკომპიუტერის Hugging Face-ის მოსახერხებელ ინტერფეისთან ინტეგრირებით, ჩვენ ორგანიზაციებს საშუალებას ვაძლევთ დააჩქარონ თავიანთი AI ინოვაციები.“ Hugging Face-ის მოდელების ტრენინგი NVIDIA DGX Cloud-ზე არასოდეს ყოფილა ასეთი მარტივი. ქვემოთ იხილავთ ნაბიჯ-ნაბიჯ ინსტრუქციას Mistral 7B-ის დასაზუსტებლად. შენიშვნა: „Train on DGX Cloud“-ის გამოსაყენებლად გჭირდებათ წვდომა Hugging Face Enterprise გამოწერის მქონე ორგანიზაციაზე. „Train on DGX Cloud“ შეგიძლიათ იპოვოთ მხარდაჭერილი გენერაციული AI მოდელების გვერდზე. ის ამჟამად მხარს უჭერს შემდეგი მოდელების არქიტექტურებს: Llama, Falcon, Mistral, Mixtral, T5, Gemma, Stable Diffusion და Stable Diffusion XL. გახსენით „Train“ მენიუ და აირჩიეთ „NVIDIA DGX Cloud“ - ეს გახსნის ინტერფეისს, სადაც შეგიძლიათ აირჩიოთ თქვენი Enterprise ორგანიზაცია. შემდეგ, დააწკაპუნეთ „Create new Space“-ზე. „Train on DGX Cloud“-ის პირველად გამოყენებისას, სერვისი შექმნის ახალ Hugging Face Space-ს თქვენი ორგანიზაციის ფარგლებში, რათა შეძლოთ AutoTrain-ის გამოყენება ტრენინგის ამოცანების შესაქმნელად, რომლებიც შესრულდება NVIDIA DGX Cloud-ზე. მოგვიანებით სხვა ტრენინგის ამოცანის შექმნისას, ავტომატურად გადამისამართდებით არსებულ AutoTrain Space-ში. AutoTrain Space-ში შესვლის შემდეგ, შეგიძლიათ შექმნათ თქვენი ტრენინგის ამოცანა აპარატურის (Hardware), საბაზისო მოდელის (Base Model), ამოცანის (Task) და ტრენინგის პარამეტრების (Training Parameters) კონფიგურაციით. აპარატურისთვის შეგიძლიათ აირჩიოთ NVIDIA H100 GPU-ები, რომლებიც ხელმისაწვდომია 1x, 2x, 4x და 8x ინსტანციებში, ან L40S GPU-ები (მალე). ტრენინგის მონაცემთა ნაკრები უშუალოდ უნდა აიტვირთოს „Upload Training File(s)“ არეალში. ამჟამად მხარდაჭერილია CSV და JSON ფაილები. დარწმუნდით, რომ სვეტების რუკების შედგენა სწორია ქვემოთ მოცემული მაგალითის მიხედვით. ტრენინგის პარამეტრებისთვის შეგიძლიათ პირდაპირ დაარედაქტიროთ JSON კონფიგურაცია მარჯვენა მხარეს, მაგალითად, ეპოქების რაოდენობის შეცვლა 3-დან 2-მდე. როდესაც ყველაფერი დაყენებულია, შეგიძლიათ დაიწყოთ ტრენინგი ღილაკზე „Start Training“ დაწკაპუნებით. AutoTrain ახლა დაადასტურებს თქვენს მონაცემთა ნაკრებს და მოგთხოვთ ტრენინგის დადასტურებას. თქვენი ტრენინგის მონიტორინგი შეგიძლიათ Space-ის „logs“-ის გახსნით. თქვენი ტრენინგის დასრულების შემდეგ, თქვენი დაზუსტებული მოდელი აიტვირთება ახალ პირად საცავში, Hugging Face Hub-ზე თქვენს მიერ არჩეულ namespace-ში. „Train on DGX Cloud“ დღესვე ხელმისაწვდომია ყველა Enterprise Hub ორგანიზაციისთვის! სცადეთ სერვისი და შეგვატყობინეთ თქვენი უკუკავშირი! „Train on DGX Cloud“-ის გამოყენება ანგარიშდება თქვენი ტრენინგის ამოცანების დროს გამოყენებული GPU ინსტანციების წუთობრივი მოხმარების მიხედვით. ტრენინგის ამოცანების ამჟამინდელი ფასებია $8.25 GPU საათში H100 ინსტანციებისთვის და $2.75 GPU საათში L40S ინსტანციებისთვის. გამოყენების საფასური თქვენი Enterprise Hub ორგანიზაციების მიმდინარე ყოველთვიურ საანგარიშო ციკლს ემატება, როგორც კი ამოცანა დასრულდება. თქვენ შეგიძლიათ შეამოწმოთ თქვენი მიმდინარე და წარსული გამოყენება ნებისმიერ დროს თქვენი Enterprise Hub ორგანიზაციის ბილინგის პარამეტრებში. მაგალითად, Mistral 7B-ის 1500 ნიმუშზე დაზუსტება ერთ NVIDIA L40S-ზე დაახლოებით 10 წუთს გრძელდება და დაახლოებით $0.45 ღირს. ჩვენ მოხარული ვართ ვითანამშრომლოთ NVIDIA-სთან, რათა დემოკრატიზდეს აჩქარებული მანქანური სწავლება ღია მეცნიერების, ღია კოდის და ღრუბლოვანი სერვისების მასშტაბით. ჩვენმა თანამშრომლობამ ღია მეცნიერებაზე BigCode-ის მეშვეობით შესაძლებელი გახადა StarCoder 2 15B-ის ტრენინგი, სრულად ღია, უახლესი კოდის LLM, რომელიც გაწვრთნილია მეტზე...