Giriş yapÜcretsiz deneyin

Ses klonlama nedir?

Ses klonlama, belirli bir gerçek kişiye benzeyen sentetik bir sesi o kişinin konuşma kayıtlarından oluşturmaktır. Klon daha sonra kişinin hiç kaydetmediği yeni cümleleri, başka dillerde de söyleyebilir; dublaj araçları bir çeviride konuşmacının kendi sesini bu şekilde korur.

Örnek
Örnek:  Anna’nın videosunda İngilizce konuştuğu 42 saniye
Metin:  “Empezamos con tres clientes y una sala alquilada.”
Sonuç:  İspanyolca replik, Anna’ya benzeyen bir sesle söylenir

Nasıl çalışır

Birçok ses üzerinde eğitilmiş bir konuşma modeli, bir sesi diğerlerinden ayıran şeyleri öğrenir: perde, tını, aksan ve ritim. Yeni bir konuşmacının örneği verildiğinde bu özellikleri yakalar ve söylediği her metne uygular. Kelimeler metinden gelir; örnekten yalnızca sesin tınısı gelir.

Anlık ve profesyonel klonlar

Anlık klon, kısa bir örnekten, çoğu zaman bir iki dakikadan az bir kayıttan saniyeler içinde yapılır ve nötr konuşmada kişiye yakın duyulur. Profesyonel klon çok daha fazla ses üzerinde, genellikle yarım saatten birkaç saate kadar temiz kayıtla eğitilir ve duygu, bağırma ya da fısıltıda daha iyi dayanır.

Onay ve hukuk

Ses bir kişiyi tanımlar. GDPR kapsamında birini tanımlamak için işlenen ses verisi biyometrik veridir; bu hizmet dahil ses klonlayan hizmetler örnekleri bu şekilde ele alır: hukuki bir dayanak, normalde açık rıza gerekir. Illinois’in BIPA yasası ses izlerini kapsar, Tennessee’nin ELVIS Act yasası bir kişinin sesini izinsiz taklide karşı korur, EU AI Act ise sentetik sesin bu şekilde açıklanmasını zorunlu kılar. Birini izinsiz klonlamak bunların birkaçını aynı anda ihlal edebilir.

Ne için kullanılır

Bir içerik üreticisinin videolarını kendi sesiyle dublajlamak, bir kayıttaki kelimeyi yeniden çekim yapmadan düzeltmek, sesini kaybetmiş kişiler için anlatım ve yazarın okuduğu sesli kitaplar. Aynı teknoloji ses dolandırıcılıklarını da mümkün kılar; saygın araçların sesi kullanma izniniz olduğuna dair onay istemesinin nedeni budur.

Sorular

Bir sesi klonlamak için ne kadar ses kaydı gerekir?

Anlık klon için yaklaşık 20 saniyeden birkaç dakikaya kadar net konuşma. Profesyonel klonlar 30 dakika ya da daha fazla kayıtla eğitilir.

Ses klonlama yasal mı?

Kendi sesinizi ya da kullanma izniniz olan bir sesi klonlamak çoğu yerde yasaldır. Birini rızası olmadan klonlamak gizlilik, biyometrik veri ve kişilik hakları yasalarını ihlal edebilir; aldatmak için kullanmak ise dolandırıcılıktır.

Klonlanmış bir ses başka bir dil konuşabilir mi?

Evet. Çok dilli konuşma modelleri, klonun kişinin konuşmadığı dilleri konuşmasını sağlayabilir; sesin tınısı korunur, ancak aksan değişebilir.

İnsanlar klonlanmış sesi gerçeğinden ayırt edebilir mi?

Kısa, nötr cümlelerde çoğu zaman edemez. Daha uzun bir içerikte düz duygu, garip vurgular ya da yanlış telaffuz edilen adlar genellikle onu ele verir.

Devamını oku

İlgili terimler

  • Dublaj

    Dublaj ne demek sorusunun kısa yanıtı: bir film, dizi ya da videodaki konuşmanın yeni kaydedilmiş bir konuşmayla, çoğunlukla başka bir dile yapılmış çeviriyle değiştirilmesidir; böylece izleyiciler altyazı okumak yerine hikâyeyi kendi dillerinde duyar. Yeni replikler görüntüye göre zamanlanır, orijinalin müziği ve ses efektleri korunur.

  • Voice over çeviri

    Voice over nedir: voice over çeviri, konuşulan bir çeviriyi orijinal sesin üzerine yerleştirir; orijinal ise daha düşük seviyede altta duyulmaya devam eder. Dublajdan farklı olarak orijinal sesleri değiştirmeye ya da dudak hareketlerine uymaya çalışmaz: izleyiciler başka birinin çeviri yaptığını duyar.

  • Dublaj metni

    Dublaj metni, bir film ya da videonun çevrilmiş diyaloğudur; her replik, orijinal repliğin ekranda sürdüğü zaman içinde söylenebilecek şekilde yeniden yazılır. Her repliği, onu söyleyen karakter ve giriş-çıkış zaman kodlarıyla birlikte listeler. Seslendirme sanatçılarının ya da bir yapay zekâ sesinin stüdyoda okuduğu, bu uyarlanmış metindir.

Güncellendi: