ഇമേജുകൾ ഇനി സംസാരിക്കും! റൺവേയുടെ പുതിയ റിയൽ-ടൈം വീഡിയോ ഏജന്റുകൾ എത്തി

AI വീഡിയോ നിർമ്മാണത്തിൽ മുന്നേറ്റവുമായി റൺവേ. ഒരു നിശ്ചല ചിത്രം നൽകിയാൽ, അതിനെ അതീവ ഭാവപ്രകടനങ്ങളുള്ള (Expressive), തത്സമയം സംസാരിക്കുന്ന ഒരു വീഡിയോ ഏജന്റായി മാറ്റാൻ സാധിക്കും.

സെക്കൻഡിൽ 24 ഫ്രെയിമുകൾ (24 fps) എന്ന നിരക്കിൽ എച്ച്ഡി (HD) ക്വാളിറ്റിയിൽ വീഡിയോ സ്ട്രീം (Real-time) ചെയ്യാൻ ഇതിന് സാധിക്കും. ഒരാൾ സംസാരിക്കുന്നത് മുതൽ എഐ തിരിച്ച് പ്രതികരിക്കുന്നത് വരെയുള്ള സമയം (Latency) വെറും 1.75 സെക്കൻഡ് മാത്രമാണ്. ഇത് തികച്ചും സ്വാഭാവികമായ ഒരു സംഭാഷണം സാധ്യമാക്കുന്നു.

ഒന്നിലധികം ആംഗിളുകളിലുള്ള ചിത്രങ്ങളോ വീഡിയോകളോ ഇതിന് ആവശ്യമില്ല. ഒരൊറ്റ ചിത്രം ഉപയോഗിച്ച് തന്നെ എല്ലാ ഭാവങ്ങളും സംഭാഷണത്തിന് അനുസരിച്ചുള്ള Lip-sync ഇത് നൽകുന്നു. നിങ്ങൾ വരച്ചതോ ജനറേറ്റ് ചെയ്തതോ ആയ ഒരു കഥാപാത്രവുമായി നേരിട്ട് സംസാരിക്കാനും അവരെക്കൊണ്ട് തത്സമയം അഭിനയിപ്പിക്കാനും ഈ സാങ്കേതികവിദ്യ വഴി സാധിക്കും.

Summary : Runway has introduced a new AI system that can transform a single still image into a highly expressive, real-time talking video agent with accurate lip-sync and emotional reactions. The technology streams HD video at 24 fps with only 1.75 seconds of latency, allowing users to interact naturally with AI-generated or illustrated characters using just one image.