Nvidia-ի նոր գործիքը ձայնի հիման վրա անիմացնում 3D մոդելի դեմքի շարժումները
Ամսաթիվ
Nvidia-ի նեյրոնային ցանցով աշխատող նոր գործիքը կարողանում է անիմացնել 3D մոդելի դեմքը, օգտագործելով միայն տրված ձայնը: Audio2Face տեխնոլոգիան աշխատում է Nvidia Omniverse բաց պլատֆորմի վրա:
Նեյրոնային ցանցը կարողանում է ձայնի հիման վրա գեներացնել դեմքի ու շուրթերի շարժումները իրական ժամանակում:
Պետք է ընդամենը վերբեռնել ձայնային ֆայլը կամ խոսել միկրոֆոնով: Հետաքրքիրն այն է, որ նույն անիմացիան հնարավոր է տեղադրել տարբեր մոդելների վրա:
Audio2Face-ը թույլ է տալիս նաև կառավարել դեմքի էմոցիաները: Ծրագիրը ընտրված էմոցիայի հիման վրա ավտոմատ գեներացնում է դեմքի, աչքերի, բերանի, լեզվի և գլխի շարժումները:
Ծրագրի բետա տարբերակը հասանելի է Nvidia կայքում: Տվյալ պահին հասանելի են 4 լեզուներ (անգլերն, ռուսերեն, ֆրանսերեն և իտալերեն): Հետագայում նախատեսվում է ավելացնել այլ լեզուներ:
