Artificial Analysis-ის მიერ შექმნილი ტექსტიდან გამოსახულების გენერაციის ლიდერბორდი მიზნად ისახავს ამ კითხვებზე პასუხის გაცემას ადამიანის შეფასებებზე დაფუძნებული რეიტინგების მეშვეობით. ELO ქულა ეფუძნება 45,000-ზე მეტ ადამიანურ შეფასებას, რომელიც შეგროვდა Artificial Analysis Image Arena-ში. ლიდერბორდზე წარმოდგენილია წამყვანი ღია კოდის და კომერციული გამოსახულების მოდელები: Midjourney-ის, OpenAI-ის DALL·E-ის, Stable Diffusion-ის, Playground-ის და სხვა უახლესი ვერსიები. ლიდერბორდის სანახავად გადადით აქ: https://huggingface.co/spaces/ArtificialAnalysis/Text-to-Image-Leaderboard თქვენ ასევე შეგიძლიათ მიიღოთ მონაწილეობა Text to Image Arena-ში და 30 ხმის შემდეგ მიიღოთ თქვენი მოდელის პერსონალიზებული რეიტინგი! გამოსახულების მოდელების ხარისხის შედარება ტრადიციულად უფრო რთული იყო, ვიდრე შეფასებები ხელოვნური ინტელექტის სხვა მიმართულებებში, მაგალითად, ენის მოდელებში, დიდწილად იმის გამო, რომ ადამიანების პრეფერენციები გამოსახულების ვიზუალურ მხარესთან დაკავშირებით, არსებითად ცვალებადია. ადრეული ობიექტური მეტრიკები შეიცვალა ძვირადღირებული ადამიანის შეფასებებზე დაფუძნებული კვლევებით, რადგან გამოსახულების მოდელები ძალიან მაღალ სიზუსტეს აღწევენ. ჩვენი Image Arena წარმოადგენს ქრაუდსორსინგის მიდგომას ადამიანის შეფასების მონაცემების მასშტაბური შეგროვებისთვის, რაც პირველად იძლევა საშუალებას, შევადაროთ ძირითადი მოდელები ერთმანეთს. ჩვენ თითოეული მოდელისთვის ELO ქულას ვითვლით ყველა შეფასების რეგრესიის მეშვეობით, Chatbot Arena-ს მსგავსად. მონაწილეებს წარედგინებათ პრომპტი და ორი გამოსახულება, და მათ უნდა აირჩიონ ის გამოსახულება, რომელიც საუკეთესოდ ასახავს პრომპტს. იმისათვის, რომ შეფასება ასახავდეს გამოყენების ფართო სპექტრს, ჩვენ თითოეული მოდელისთვის 700-ზე მეტ გამოსახულებას ვაგენერირებთ. პრომპტები მოიცავს მრავალფეროვან სტილს და კატეგორიებს, მათ შორის ადამიანის პორტრეტებს, ადამიანთა ჯგუფებს, ცხოველებს, ბუნებას, ხელოვნებას და სხვა. ლიდერბორდის სანახავად, გადახედეთ Hugging Face-ის გვერდს აქ: https://huggingface.co/spaces/ArtificialAnalysis/Text-to-Image-Leaderboard რეიტინგში მონაწილეობის მისაღებად და თქვენი შეფასებების დასამატებლად, აირჩიეთ ‘Image Arena’ ჩანართი და შეარჩიეთ ის გამოსახულება, რომელიც თქვენი აზრით საუკეთესოდ წარმოადგენს მოცემულ პრომპტს. 30 გამოსახულების შეფასების შემდეგ, აირჩიეთ ‘Personal Leaderboard’ ჩანართი, რათა იხილოთ თქვენი პერსონალიზებული გამოსახულების მოდელების რეიტინგი, თქვენს მიერ გაკეთებული არჩევანის მიხედვით. განახლებებისთვის, მოგვყევით Twitter-ზე და LinkedIn-ზე. (ჩვენ ასევე ვადარებთ ტექსტიდან გამოსახულების მოდელის API-ების სიჩქარეს და ფასებს ჩვენს ვებგვერდზე: https://artificialanalysis.ai/text-to-image). მივესალმებით ნებისმიერ უკუკავშირს! ჩვენ ხელმისაწვდომი ვართ Twitter-ზე შეტყობინების საშუალებით, ასევე ჩვენს ვებგვერდზე საკონტაქტო ფორმის მეშვეობით. Artificial Analysis-ის ტექსტიდან გამოსახულების გენერაციის ლიდერბორდი არ არის ერთადერთი ხარისხის შეფასების ან ქრაუდსორსინგული ინიციატივა. ჩვენ შევქმენით ჩვენი ლიდერბორდი, რათა ყურადღება გამახვილებულიყო როგორც კომერციულ, ისე ღია კოდის მოდელებზე, რათა სრულყოფილი სურათი მიგვეღო იმის შესახებ, თუ როგორ ადარებენ ერთმანეთს წამყვანი ტექსტიდან გამოსახულების მოდელები. სხვა მსგავსი შესანიშნავი ინიციატივებისთვის შეგიძლიათ გაეცნოთ ჩვენი ბლოგის სხვა სტატიებს.