TikTok prezentuje SWE-Perf: nowa miara efektywności modeli językowych w optymalizacji kodu
Naukowcy z TikTok przedstawili SWE-Perf, pierwszy benchmark oceniający zdolność dużych modeli językowych (LLM) do optymalizacji wydajności kodu na poziomie całego repozytorium. Inicjatywa zwraca uwagę na znaczącą lukę między możliwościami sztucznej inteligencji a ludzkimi ekspertami w realnych zastosowaniach inżynierii oprogramowania.
Read More