Tavus 개발 인공 지능으로 맞춤형 비디오 캠페인 혁신화
제너레이티브 인공지능 스타트업 '타부스', 1,800만 달러를 조달하고 디지털 사본을 자신의 앱에서 생성할 수 있도록 개발자들에게 플랫폼을 공개한다.
“`html
Tavus, a startup specializing in AI-generated videos, secures $18 million funding to integrate face and voice replication into any application.
Tavus, a four-year-old generative AI startup, has recently secured $18 million in funding and announced that its platform will be open for integration with third-party software. The company specializes in creating digital replicas of individuals for automated personalized video campaigns.
The Video Revolution
Generative AI has been making waves in recent years, with advancements in text-based search engines and text-to-image models. Tavus is at the forefront of yet another wave in the generative AI movement: video. Opening up possibilities for personalized video content at scale, Tavus is poised to transform the creative industry.
Companies like OpenAI have already introduced text-to-video models that have the power to revolutionize video creation. Tech giants such as Google have also been working on similar tools. Tavus takes a unique approach by leveraging its generative AI technology to create replicas of individuals through voice and face cloning.
Tavus’ cloning in action
- 애플, AI 기반 광고 분야 진출 산업의 패러다임 변화 🍎💡
- 🚀 비트코인, 71,000달러로 사상 최고치 달성 급증의 배경은 무엇인가요...
- 🚀 코인베이스, SEC와 회동하여 이더리움 ETF 제안에 대해 그레이스케일...
Personalized Videos at Scale
Using Tavus, sales and marketing teams can send personalized videos to prospects, while product teams can create customized walkthrough videos for onboarding new customers. All of this is achieved through simple text-based prompts that leverage the previously created digital replicas.
By integrating Tavus with third-party systems like Salesforce or Mailchimp, companies can automate much of this process. For example, when a customer completes an online form requesting further information on a product, they can instantly receive a personalized video. The sales representative can address the prospect by name and explain the next steps.
Tavus has already attracted significant customers, including Salesforce and Meta, the parent company of Facebook. These industry giants are using Tavus to upsell to their respective B2B customers through personalized demo videos.
Tavus as a Platform
Up until now, Tavus has been available as a software-as-a-service (SaaS) app, where customers could create their own AI video templates. The onboarding process involved recording a 15-minute video based on a script provided by Tavus. This video was used to train the AI, and users could then customize different parts of the video, such as location, executive name, company, or product.
Editing variables in Tavus
The core SaaS product offered by Tavus remains intact, but the company is now introducing a new, turbo-charged version of its technology. Alongside this, Tavus is launching the first set of developer APIs, allowing third-party integration. With this, developers can incorporate Tavus into their own applications and take advantage of its capabilities.
Replica API: Creating Photo-Realistic Digital Replicas
The first API released by Tavus is the “replica API.” This API enables the creation of “photo-realistic” digital replicas using a new proprietary model called “Phoenix.” Phoenix, based on a deep learning method known as neural radiance field (NeRF), can generate a 3D construct of a person from 2D images in just a couple of minutes.
“It essentially allows you to create entire videos with just two minutes of training data, which is a big leap forward from how we were previously doing personalization at scale,” says Tavus co-founder and CEO Hassaan Raza. “Once you have a replica, you can make as many videos as you want.”
The Phoenix NeRF model used by Tavus to construct a realistic replica
“““html
Tavus는 립싱크, 더빙, 대규모 및 맞춤형 비디오 캠페인 실행을 위한 추가 API를 개발 중에 있습니다. 이러한 API는 다른 사용 사례를 대상으로 하며 Tavus의 기술을 다양한 비디오 제작 요구에 적응할 수 있는 유연성을 제공합니다.
딥페이크 우려 완화
딥페이크와 같은 우려의 증가와 Tavus와 같은 플랫폼의 남용 가능성에 대한 우려가 높아지면서, 회사에서 남용을 방지하기 위한 조치를 시행했습니다. 사용자는 구체적인 명시적 동의 문구를 제출해야 하며, 이 문구는 그 후 훈련 영상의 음성과 대조되어 진위를 확인합니다.
“우리는 이러한 확인을 자동으로 실행한 후, 모든 오토마타 확인을 통과하는 복제본에 대해 안전을 보장하기 위해 직접 인간 검사를 진행합니다,”라고 Raza가 설명합니다. Tavus는 API를 통해 제 3자 통합으로도 검증을 유지합니다.
디지털 복제본으로 현실 확장하기
생성 AI가 다양한 형태로 발전함에 따라, Tavus는 사람의 자체 현실을 확장하는 데 집중함으로써 자신을 차별화합니다. 회사는 미래를 상상하며 모든 사람이 디지털 복제본을 가지고 자신의 대본을 전적으로 통제할 수 있는 시대를 그립니다. Tavus는 개인의 개성과 제스처를 보다 포착하여 각 개인의 고유한 특성과 공감할 수 있는 실제적인 복제본을 만들어냅니다.
미래에 대한 대비
최근 1800만 달러의 자금을 조달한 Tavus는 계속된 성장에 힘을 실어주기 위해 준비가 돼 있습니다. 회사는 Phoenix와 같은 새로운 모델의 추가 연구 및 개발에 투자할 계획이며, 개발자 및 SaaS 고객을 보다 잘 지원하기 위해 기계 학습 및 엔지니어링 팀을 확대할 것을 목표로 하고 있습니다.
🎥 비디오: Tavus의 기술이 개혁적인 맞춤형 비디오 캠페인을 어떻게 혁신하고 있는지 확인하세요: 지금 보기
📚 더 알아보기: 생성 AI의 다른 흥미로운 발전 사항에 대해 읽어보세요: 1. OpenAI의 Sora – 텍스트를 비디오로 변환 2. Google의 비디오 생성 작업 3. 창조 산업에 미치는 생성 AI의 영향
🗣️ Tavus 및 이 회사가 대규모로 개인화된 비디오를 만들어내는 역량에 대한 여러분의 생각은 무엇인가요? 여러분의 의견을 공유하고 토론에 참여해 보세요!
🔁 여러분의 즐겨찾는 소셜 미디어 플랫폼에서 이 기사를 공유하여, 생성 AI에 의한 비디오 혁명에 대한 다른 이들의 알릴 수 있도록 잊지 마세요.
참고 자료: – Tavus가 1800만 달러를 조달하고 제 3자 통합을 위해 플랫폼을 공개 – Deepfake 우려와 Tavus가 그것을 완화하는 방법 – 창조 산업에 미치는 생성 AI의 미래
“`
