Meta’nın Yeni Çeviri Modeli: SeamlessM4T

Meta, neredeyse 100 farklı dilde çeviri yapabilen yeni bir konuşma metni çeviri modeli olan SeamlessM4T’yi piyasaya sürdü. Şirket, evrensel bir çevirmen oluşturma amacıyla çalışmalarını sürdürüyor.

    Meta, evrensel bir çevirmen vizyonu doğrultusunda, SeamlessM4T adında yeni bir çeviri modeli geliştirdiğini duyurdu. Bu model, metinleri ve konuşmaları neredeyse 100 farklı dil arasında çevirebiliyor.

    SeamlessM4T Nedir?

    SeamlessM4T, “Massively Multilingual and Multimodal Machine Translation” ifadesinin kısaltmasıdır. Bu model, neredeyse 100 dilde hem metin-çeviriden metne hem de konuşma-çeviriden metne çeviri yapabiliyor. Böylece dünya dillerini birbirine bağlama amacı güden bir adım daha atılmış oluyor. Program girdi olarak 100 farklı dili tanıyabiliyor ve bunları 35 farklı çıktı diline çevirebiliyor. Böylece çoklu dil ve çoklu modlarda çeviri yapma yeteneği ile öne çıkıyor.

    SeamlessM4T, Creative Commons CC BY-NC 4.0 lisansı altında piyasaya sürüldü. Bu sayede araştırmacılar, modeli daha da geliştirebilmek için kullanabilirler. Aynı zamanda, Meta, açık çeviri veri seti SeamlessAlign’in meta verilerini de paylaştı.

    Kurgusal Babel Fish ve TARDIS Çeviri Matrisi

    Meta, evrensel bir dil çevirmeni inşa etmenin zorluklarını açıklarken, “The Hitchhiker’s Guide to the Galaxy” kitabındaki hayali “Babel Fish“e atıfta bulunuyor. Babel Fish, kitapta anlatıldığı gibi kulak içine yerleştirilen bir balıktır ve anında herhangi bir dili anlama yeteneği sunar. Aynı zamanda “Doctor Who” hayranları için, Meta’nın aracını TARDIS’in içindeki çeviri matrisine benzetmek de mümkündür.


    The Hitchhiker’s Guide to the Galaxy’deki kurgusal Babel Fish gibi Evrensel bir dil çevirmeni inşa etmek, mevcut konuşmadan konuşmaya ve konuşmadan metne sistemlerin dünya dillerinin sadece küçük bir bölümünü kapsadığı için bir takım zorluklar içeriyor”

    Meta

    Yenilik: Tüm Çeviri Görevini Tek Seferde Gerçekleştirme

    SeamlessM4T, büyük çeviri modellerinin farklı sistemlere bölünmüş şekilde çeviri yapmasının aksine, tüm çeviri görevini tek seferde gerçekleştirebilen bir model olarak öne çıkıyor. Bu, önemli bir adım olarak kabul ediliyor.

    Modelin ilginç özelliklerinden biri, konuşmacının birden fazla dil arasında geçiş yaptığı durumları tanıyabilme yeteneğidir. Örneğin, modelin Hindice, Telugu ve İngilizce arasındaki geçişleri hızla ayırt edebildiği bir video demosu bulunmaktadır.

    Meta’nın Önceki Çeviri Modelleri

    Meta, SeamlessM4T’ten önce de bir dizi çeviri modeli geliştirdi. “No Language Left Behind” adlı metin-çeviri modeli, 200 farklı dili destekliyordu. Ayrıca Meta, “SpeechMatrix” adlı çoklu dil konuşma-çeviri veri setini ve çok dilli konuşma tanıma için “Massively Multilingual Speech“i geliştirdi.

    Dil Çevirisi ve Meta’nın Rolü

    Meta gibi şirketler için dil çevirisi, binlerce moderatörü farklı dillerdeki Facebook ve Instagram gönderilerini yönetmek üzere istihdam etmeleri nedeniyle önemlidir. Çoğu zaman, büyük diller dışındaki diller için yetersiz çalışan otomatik moderasyona dayanmak gerekebilir. Bu noktada, küçük dillere ait veri kümelerine erişim sağlanması durumunda yapay zeka, moderasyonu geliştirmek için bir araç olabilir.

    SeamlessM4T’in Geliştirilme Süreci

    SeamlessM4T’in geliştirilirken, Meta Fairseq sıralı modelleme aracını yeniden tasarladı ve daha hafif modeller oluşturarak daha fazla bilgiyi işlemeye olanak tanıdı.

    Eğitim verilerinde dengesiz toksisiteyi filtreledik. Girdi veya çıktı farklı oranlarda toksisite içeriyorsa, o eğitim dizisini çıkardık.

    Meta

    Meta, çıktı çevirinin orijinal metinde bulunmayan toksisite eklemesi durumunu tespit edebilmeyi hedefleyerek, toksik veya hassas kelimeleri tanımlayan bir sistem geliştirdi. Modelin cinsiyet eğilimini de algılayabildiğini iddia ediyor. Model, cinsiyet ayrımı yapılmamış terimlere cinsiyetli kelimeler eklediğinde bunu tespit edebiliyor.

    Meta, birçok yapay zeka modelini geliştiricilere ve araştırmacılara açık kaynaklı bir şekilde sunmaktadır. Son zamanlarda, metin-ses dönüşümüne izin veren AudioCraft kodunu yayınladı ve büyük dil modeli Llama 2’ye erişim sağladı.

    Önceki yazı

    Gizemli Bitcoin Cüzdanı 3 Ay İçinde Üçüncü En Büyük BTC Sahibi Oldu

    Sonraki yazı

    Microsoft Popüler Programlama Dili Python'ı Excel'e Getiriyor

    bitcoin
    Bitcoin (BTC) $ 68,345.21 1.76%
    ethereum
    Ethereum (ETH) $ 2,640.73 1.31%
    tether
    Tether USDt (USDT) $ 1.00 0.05%
    bnb
    BNB (BNB) $ 599.17 1.55%
    solana
    Solana (SOL) $ 154.24 2.64%
    usd-coin
    USDC (USDC) $ 1.00 0.04%
    xrp
    XRP (XRP) $ 0.54601 0.04%
    dogecoin
    Dogecoin (DOGE) $ 0.138234 7.49%
    tron
    TRON (TRX) $ 0.159075 0.55%
    toncoin
    Toncoin (TON) $ 5.22 1.14%
    cardano
    Cardano (ADA) $ 0.348038 1.59%
    avalanche
    Avalanche (AVAX) $ 27.91 2.66%
    shiba-inu
    Shiba Inu (SHIB) $ 0.000019 3.27%
    bitcoin-cash
    Bitcoin Cash (BCH) $ 365.01 2.29%
    chainlink
    Chainlink (LINK) $ 11.40 3.38%
    polkadot-new
    Polkadot (DOT) $ 4.26 1.78%
    near-protocol
    NEAR Protocol (NEAR) $ 4.85 2.22%
    sui
    Sui (SUI) $ 2.10 2.65%
    unus-sed-leo
    UNUS SED LEO (LEO) $ 6.11 0.26%
    litecoin
    Litecoin (LTC) $ 73.40 0.35%
    multi-collateral-dai
    Dai (DAI) $ 1.00 0.01%
    aptos
    Aptos (APT) $ 9.97 0.35%
    uniswap
    Uniswap (UNI) $ 7.39 0.26%
    pepe
    Pepe (PEPE) $ 0.00001 5.36%
    bittensor
    Bittensor (TAO) $ 572.44 1.68%
    internet-computer
    Internet Computer (ICP) $ 7.97 4.10%
    artificial-superintelligence-alliance
    Artificial Superintelligence Alliance (FET) $ 1.42 4.56%
    kaspa
    Kaspa (KAS) $ 0.128909 2.93%
    monero
    Monero (XMR) $ 159.18 1.63%
    stacks
    Stacks (STX) $ 1.92 4.04%
    ethereum-classic
    Ethereum Classic (ETC) $ 19.23 1.12%
    stellar
    Stellar (XLM) $ 0.096251 1.46%
    polygon-ecosystem-token
    POL (ex-MATIC) (POL) $ 0.367825 0.86%
    render
    Render (RENDER) $ 5.36 2.34%
    first-digital-usd
    First Digital USD (FDUSD) $ 0.999638 0.07%
    dogwifhat
    dogwifhat (WIF) $ 2.62 2.35%
    immutable-x
    Immutable (IMX) $ 1.54 3.31%
    okb
    OKB (OKB) $ 40.56 0.28%
    aave
    Aave (AAVE) $ 156.99 2.53%
    filecoin
    Filecoin (FIL) $ 3.73 1.85%
    optimism-ethereum
    Optimism (OP) $ 1.70 1.65%
    injective
    Injective (INJ) $ 21.84 2.47%
    mantle
    Mantle (MNT) $ 0.615203 0.09%
    cronos
    Cronos (CRO) $ 0.077808 0.17%
    fantom
    Fantom (FTM) $ 0.731038 1.52%
    arbitrum
    Arbitrum (ARB) $ 0.561595 2.35%
    hedera
    Hedera (HBAR) $ 0.051629 1.11%
    vechain
    VeChain (VET) $ 0.023107 3.14%
    bonk1
    Bonk (BONK) $ 0.000023 3.78%
    thorchain
    THORChain (RUNE) $ 5.03 5.02%
    cosmos
    Cosmos (ATOM) $ 4.31 0.35%
    sei
    Sei (SEI) $ 0.439908 1.88%
    the-graph
    The Graph (GRT) $ 0.167279 2.17%
    bitget-token-new
    Bitget Token (BGB) $ 1.13 3.17%
    floki-inu
    FLOKI (FLOKI) $ 0.00015 5.41%
    popcat-sol
    Popcat (SOL) (POPCAT) $ 1.37 0.01%
    celestia
    Celestia (TIA) $ 5.96 0.21%
    mantra
    MANTRA (OM) $ 1.53 1.30%
    worldcoin-org
    Worldcoin (WLD) $ 2.36 10.84%
    theta-network
    Theta Network (THETA) $ 1.29 3.52%
    pyth-network
    Pyth Network (PYTH) $ 0.347833 2.44%
    arweave
    Arweave (AR) $ 18.76 1.51%
    jupiter-ag
    Jupiter (JUP) $ 0.857664 4.83%
    ethena
    Ethena (ENA) $ 0.416549 8.73%
    ondo-finance
    Ondo (ONDO) $ 0.79122 11.43%
    based-brett
    Brett (Based) (BRETT) $ 0.109623 7.25%
    kucoin-token
    KuCoin Token (KCS) $ 8.93 1.07%
    helium
    Helium (HNT) $ 6.15 6.10%
    maker
    Maker (MKR) $ 1,200.41 0.65%
    algorand
    Algorand (ALGO) $ 0.122044 2.41%
    bitcoin-sv
    Bitcoin SV (BSV) $ 51.26 1.71%
    lido-dao
    Lido DAO (LDO) $ 1.12 3.31%
    polygon
    Polygon (MATIC) $ 0.367493 0.80%
    jasmy
    JasmyCoin (JASMY) $ 0.019097 0.88%
    aerodrome-finance
    Aerodrome Finance (AERO) $ 1.38 0.85%
    bittorrent-new
    BitTorrent [New] (BTT) $ 0.00000093234816 2.31%
    core-dao
    Core (CORE) $ 0.948287 2.56%
    onbeam
    Beam (BEAM) $ 0.017262 8.58%
    flow
    Flow (FLOW) $ 0.548012 2.19%
    notcoin
    Notcoin (NOT) $ 0.008104 3.77%
    gatetoken
    GateToken (GT) $ 9.09 0.88%
    first-neiro-on-ethereum
    First Neiro On Ethereum (NEIRO) $ 0.001955 4.05%
    mog-coin
    Mog Coin (MOG) $ 0.000002 7.96%
    mew
    cat in a dogs world (MEW) $ 0.009029 6.17%
    quant
    Quant (QNT) $ 66.00 2.23%
    gala
    Gala (GALA) $ 0.022235 4.22%
    starknet-token
    Starknet (STRK) $ 0.400427 1.44%
    wormhole
    Wormhole (W) $ 0.287912 0.44%
    ordi
    ORDI (ORDI) $ 36.73 3.61%
    usdd
    USDD (USDD) $ 1.00 0.05%
    flare
    Flare (FLR) $ 0.014701 1.91%
    neo
    Neo (NEO) $ 10.48 1.19%
    eos
    EOS (EOS) $ 0.482579 0.94%
    conflux-network
    Conflux (CFX) $ 0.160946 2.83%
    multiversx-egld
    MultiversX (EGLD) $ 26.45 3.50%
    axie-infinity
    Axie Infinity (AXS) $ 4.70 2.04%
    pendle
    Pendle (PENDLE) $ 4.44 6.92%
    ecash
    eCash (XEC) $ 0.000036 0.92%
    tezos
    Tezos (XTZ) $ 0.689472 2.21%
    chiliz
    Chiliz (CHZ) $ 0.074951 0.12%