AIを使って英語の音声を日本語に翻訳した動画が、あまりにも自然で驚く「訛りまで再現してる？」

(・ω・) @kin_you_regular

大学の先生にこんな喋り方の人いたわ twitter.com/wolt556/status…

うぉると @wolt556

めちゃくちゃすごい。すごいんだけど、翻訳後の見た目・発音・言葉選び、どれをとっても「ネイティブの日本人」ではなく「日本語をめちゃくちゃ学んだ非ネイティブ」に近いのはなんでなん🤔 （むしろそこの絶妙さがすごい） twitter.com/iowateslaguy/s…

2023-10-22 11:12:04

ぽ ん @Crowofdawning

知り合いにいる、英語話者で言語学修了した方が話す日本語にソックリ！ 文法も抑揚も完璧で100%通じるけど、全体に固い感じ。 twitter.com/wolt556/status…

うさ夫 @kaninukassa

この訛り方誰かに似てるなーと思ったらあれだ、ガルージン元駐日ロシア大使。 twitter.com/wolt556/status…

うぉると @wolt556

①AIに学ばせたモデルが「日本語を学んだ英語話者」だった ②英語話者が日本語を話すと、骨格や筋肉、言語野的にどうしてもこういう風にしかならない 思いつくのはこれくらい。

mao＠サバト司祭 @mao_sabbath

@wolt556 イントネーションは完璧でも発音、発声の違いの影響が出てるのかなと思いました。

やも @yamo55

@wolt556 顔を左右に振って喋ってるからかなぁ日本人って正面を向いて喋る それがニュースキャスターだと特に顕著になるね

nagasaka takaharu @chikaponpapa

人が話す、とは口の動きだけで無く首の傾きも目の動きも言語性を持って居る、と言う証拠になりそうなアプリ。 twitter.com/wolt556/status…

בהִנד @bhind13

他の方も書かれているけど、この方の声質を構成している骨格だったり筋肉の使い方だったりを再現すると、どうしても日本語ネイティブのサンプルが存在せず、結果、日本語をよく知る非ネイティブに寄ってしまうのでないのかなと思ったり。 twitter.com/wolt556/status…

בהִנד @bhind13

言語の音域や発音時の骨格、筋肉の活かし方はかなり違うと思っています。日本語でも関東弁と関西弁ひとつをとっても抑揚やトーンは異なるため、非ネイティブが他の言語のネイティブよりに母国語を話すサンプルが増えないとダメかも知れないです。例としては某日本のVのハコ所属の英語話者の日本語寄り英語とか…

山吹オルカ🅨オタク医師時々VTuber @YamabukiOrca

ChatGPTの音声会話も「日本語めちゃ学んだ非ネイティブ」と喋ってる感あるんだよなー。AIの母語？的なものの影響かしら。 twitter.com/wolt556/status…

宮廷画家 @saon_painter

ChatGPTの発話も、このような発音をする。Text-to-Speechのシステムを載せているだけらしいのだが、これも同じなんだろうな。 GPTの解説によると、これらは皆同じTTSで、多言語・多分化に特化しない学習方法を採用していることと、日本語の音韻が特殊すぎるのでエンジンが理解できていないのではと twitter.com/wolt556/status…

宮廷画家 @saon_painter

こちらの発した発音を真似することもできないから、"多言語学習"の上でたどり着いた理解があのイントネーションなのだろう。 つまり大きな意味での外国人が日本語を学習すると、学んだ上でその「非ネイティブ」のイントネーションに辿り着くのかもしれない。

mikumiku_aloha @mikumiku_aloha

@wolt556 英語の小説を日本語に翻訳すると翻訳文体になるように英語での話の筋の立て方、順番を元に変換すると英語話者が日本語を勉強したような話し方になるのではないかと思いました

佐々野ささき 🇨🇦メロスピ制作VTuber @sasanosasaki

これ仮に日本語ネイティブの人が英語で話した時もこういう発音や言葉選びになるんですかね？ 言葉選びはAI由来だから同様になりそうだけど、発音はどうなるのか想像つかない。 twitter.com/wolt556/status…

ばた男　燃え燃えｷｭﾝ @batabatawo

すべて「ですます」口調なのが逆に違和感とか？ 二重敬語みたいななんか変なとこがあるのかも twitter.com/wolt556/status…

岩元大輔 @sta_labo

@wolt556 視覚情報のせいです。サバンナの高橋が話してると思ってください。ネイティブです。 pic.twitter.com/sYVRjEzQmD

拡大

山野里子_YaSa @Eoo_oo3

@iowateslaguy Super! It's great enough to convey the message. Not sure if it's deliberately done, but certain parts were omitted, though. Did you say "Good bye" at the end?

Iowa Tesla - Jim Spencer @iowateslaguy

@Eoo_oo3 The English video is what I translated. No. I didn’t say goodbye at the end.

山野里子_YaSa @Eoo_oo3

@iowateslaguy I see. I was curious since Japanese video says "Sayonara" at the end. Interesting.

Shampooh @siampuu

@Eoo_oo3 @iowateslaguy AI translation tools are rather prone to so-called "hallucinations" like this, adding words that it "thinks" are contextually appropriate even if they aren't there. Example, a YouTube video transcript maybe have "like and subscribe" added to it even if it's not in the original.