nähdä Vaihdokas uusimmat ominaisuudet ja korjaukset.
Olet todennäköisesti kokenut haasteen tehdä muistiinpanoja kokouksen aikana yrittäessäsi kiinnittää huomiota keskusteluun. Olet luultavasti myös kokenut tarpeen tarkistaa nopeasti faktat jostakin sanotusta tai etsiä tietoja vastataksesi kysymykseen, joka on juuri esitetty puhelussa. Tai ehkä sinulla on tiimin jäsen, joka liittyy kokouksiin aina myöhässä ja odottaa, että lähetät hänelle nopean yhteenvedon chatin kautta, jotta hän saa yhteyden.
Sitten on aikoja, jolloin muut puhuvat kielellä, joka ei ole sinun ensimmäinen kielesi, ja haluaisit saada live-käännöksen siitä, mitä ihmiset sanovat varmistaaksesi, että ymmärrät oikein.
Ja puhelun päätyttyä haluat yleensä tallentaa yhteenvedon tietueitasi varten tai lähettää osallistujille luettelon kaikista toimintokohteista, omistajista ja eräpäivistä.
Kaikki tämä ja enemmän on nyt mahdollista uusimmalla esimerkkiratkaisullamme, Live Meeting Assistantilla (LMA).
Katso seuraava demo nähdäksesi, kuinka se toimii.
Tässä viestissä näytämme sinulle, kuinka LMA:ta käytetään Amazonin transkriptio, Amazonin kallioperäja Amazon Bedrockin tietokannat.
Ratkaisun yleiskatsaus
LMA-näyteratkaisu kaappaa kaiuttimien äänen ja metatiedot selainpohjaisesta kokoussovelluksestasi (tällä hetkellä Zoom ja Chime ovat tuettuja) tai vain äänen mistä tahansa muusta selainpohjaisesta kokoussovelluksesta, softphonesta tai äänilähteestä. Se käyttää Amazon Transcribea puheesta tekstiksi, Knowledge Bases for Amazon Bedrockia asiayhteyteen liittyviin kyselyihin yrityksesi asiakirjoista ja tietolähteistä ja Amazon Bedrock -malleja mukautettavien transkriptionäkemysten ja yhteenvetojen tekemiseen.
Kaikki tarvitsemasi tarjotaan avoimena lähdekoodina meidän GitHub repo. Se on yksinkertaista ottaa käyttöön AWS-tililläsi. Kun olet valmis, ihmettelet, kuinka olet koskaan pärjännyt ilman sitä!
Seuraavassa on joitain asioita, joita LMA voi tehdä:
- Live-transkriptio puhujien attribuutiolla – LMA:n tehonlähteenä ovat Amazon Transcribe ASR -mallit alhaisen latenssin ja korkean tarkkuuden puheesta tekstiksi. Voit opettaa sille tuotemerkkejä ja verkkotunnuskohtaista terminologiaa tarvittaessa käyttämällä mukautettua sanastoa ja mukautettuja kielimallin ominaisuuksia Amazon Transcribessa.
- Suora käännös – Se käyttää Amazon Translatea näyttääkseen valinnaisesti jokaisen keskustelun osan käännettynä valitsemallesi kielelle 75 kielen valikoimasta.
- Kontekstitietoinen kokousavustaja – Se käyttää Amazon Bedrockin Knowledge Bases for -tietokantoja tarjotakseen vastauksia luotettavista lähteistäsi käyttämällä reaaliaikaista transkriptiota asiayhteyteen faktantarkistus- ja seurantakysymyksissä. Aktivoi avustaja sanomalla "Okei, Assistant" ja valitsemalla KYSY ASUSTAJALTA! -painiketta tai kirjoita oma kysymyksesi käyttöliittymään.
- Tilauksesta yhteenvedot kokouksesta – Käyttöliittymän napin painalluksella voit luoda yhteenvedon, josta on hyötyä, kun joku liittyy myöhään ja joutuu jäämään kiinni. Yhteenvedot on luonut Amazon Bedrockin transkriptiosta. LMA tarjoaa myös vaihtoehtoja nykyisen kokouksen aiheen tunnistamiseen ja toimintokohteiden luettelon luomiseen omistajilla ja määräpäivillä. Voit myös luoda omia mukautettuja kehotteita ja vastaavia vaihtoehtoja.
- Automaattinen yhteenveto ja oivalluksia – Kun kokous on päättynyt, LMA suorittaa automaattisesti joukon suuria kielimallin (LLM) kehotteita Amazon Bedrockissa tehdäkseen yhteenvedon kokouksen pöytäkirjasta ja poimiakseen oivalluksia. Voit myös mukauttaa näitä kehotteita.
- Kokouksen tallennus – Ääni tallennetaan (valinnaisesti) puolestasi, joten voit toistaa kokouksen tärkeät osat myöhemmin uudelleen.
- Kokousten luettelo – LMA pitää kirjaa kaikista kokouksistasi haettavana luettelona.
- Selainlaajennus tallentaa äänen ja kokousten metatiedot suosituista kokoussovelluksista – Selainlaajennus tallentaa kokouksen metatiedot – kokouksen otsikon ja aktiivisten puhujien nimet – ja äänen sinulta (mikrofonisi) ja muilta (kokouksen selaimen välilehdeltä). Tätä kirjoitettaessa LMA tukee Chromea selainlaajennukselle ja Zoomia ja Chimeä kokoussovelluksille (Times ja WebEx ovat tulossa pian). Erilliset kokoussovellukset eivät toimi LMA:n kanssa – sen sijaan käynnistä kokouksesi selaimessa.
Olet vastuussa kokousten ja puheluiden tallentamiseen sovellettavien lakisääteisten, yritysten ja eettisten rajoitusten noudattamisesta. Älä käytä tätä ratkaisua puhelujen suoratoistoon, tallentamiseen tai litteroimiseen, jos se on muuten kielletty.
Edellytykset
Sinulla on oltava AWS-tili ja AWS-henkilöllisyyden ja käyttöoikeuksien hallinta (IAM) rooli ja käyttäjä, jolla on oikeudet luoda ja hallita tarvittavia resursseja ja komponentteja tälle sovellukselle. Jos sinulla ei ole AWS-tiliä, katso Kuinka luon ja aktivoin uuden Amazon Web Services -tilin?
Tarvitset myös olemassa olevan tietokannan Amazon Bedrockissa. Jos et ole vielä määrittänyt sellaista, katso Luo tietokanta. Täytä tietokantaasi sisällöllä, jotta LMA:n kontekstitietoinen kokousavustaja toimii.
Lopuksi LMA käyttää Amazon Bedrock LLM:iä kokousten yhteenvetoominaisuuksiinsa. Ennen kuin jatkat, jos et ole aiemmin tehnyt niin, sinun on tehtävä pyydä pääsy seuraaviin Amazon Bedrock -malleihin:
- Titan Embeddings G1 – Teksti
- Anthropic: Kaikki Claude-mallit
Ota ratkaisu käyttöön AWS CloudFormationin avulla
Olemme toimittaneet valmiiksi rakennetun AWS-pilven muodostuminen malleja, jotka ottavat käyttöön kaiken tarvitsemasi AWS-tililläsi.
Jos olet kehittäjä ja haluat rakentaa, ottaa käyttöön tai julkaista ratkaisun koodista, katso Kehittäjä README.
Suorita seuraavat vaiheet käynnistääksesi CloudFormation-pinon:
- Kirjaudu sisään AWS-hallintakonsoli.
- Valita Käynnistä pino haluamaasi AWS-alueeseen avataksesi AWS CloudFormation -konsolin ja luodaksesi uuden pinon.
Alue | Käynnistä pino |
---|---|
Yhdysvaltojen itä (N. Virginia) | |
Länsi-USA (Oregon) |
- varten Pino nimi, käytä oletusarvoa LMA.
- varten Admin Sähköpostiosoite, käytä kelvollista sähköpostiosoitetta – väliaikainen salasanasi lähetetään tähän osoitteeseen käyttöönoton aikana.
- varten Tilin valtuutettu sähköpostiverkkotunnus, käytä yrityksen sähköpostiosoitteen verkkotunnuksen nimiosaa, jotta käyttäjät, joilla on samassa verkkotunnuksessa sähköpostiosoitteita, voivat luoda omia uusia käyttöliittymätilejä, tai jätä tyhjäksi estääksesi käyttäjiä luomasta omia tilejä suoraan. Voit kirjoittaa useita verkkotunnuksia pilkuilla eroteltuna luettelona.
- varten MeetingAssistService, valitse
BEDROCK_KNOWLEDGE_BASE
(ainoa käytettävissä oleva vaihtoehto tätä kirjoitettaessa). - varten Meeting Assist kallioperän tietokannan tunnus (olemassa), anna olemassa oleva tietokantatunnuksesi (esim.
JSXXXXX3D8
). Voit kopioida sen Amazon Bedrock -konsolista. - Käytä oletusarvoja kaikille muille parametreille.
Jos haluat muokata asetuksia myöhemmin, esimerkiksi lisätä omiasi AWS Lambda toimintoja, käyttää mukautettuja sanastoja ja kielimalleja parantaaksesi tarkkuutta, mahdollistaaksesi henkilökohtaisten tunnistetietojen (PII) muokkauksen ja paljon muuta, voit päivittää näiden parametrien pinon.
- Valitse kuittausvalintaruudut ja valitse sitten Luo pino.
Pääasiallinen CloudFormation-pino käyttää sisäkkäisiä pinoja seuraavien resurssien luomiseen AWS-tililläsi:
- Amazonin yksinkertainen tallennuspalvelu (Amazon S3) -kauhat rakennusteosten ja puhelutallenteiden säilyttämiseen
- An AWS-veljeskunta tehtävä an Sovelluksen kuormituksen tasaaja tarjoaa WebSocket-palvelimen, joka käyttää koodia stereoäänivirtojen kuluttamiseen ja välittämiseen Amazon Transcribeille, transkriptioosien julkaisemiseen Amazon Kinesis -tietovirratsekä luoda ja tallentaa stereopuhelutallenteita
- Kinesis-datavirta puhelutapahtumien ja transkriptioosien välittämiseksi rikastuskäsittelytoimintoon
- LMA-resurssit, mukaan lukien QnABot AWS-ratkaisussa pino, joka on vuorovaikutuksessa Amazon OpenSearch-palvelu ja Amazon Bedrock
- - AWS AppSync API, joka tarjoaa GraphQL-päätepisteen kyselyjen ja reaaliaikaisten päivitysten tukemiseen
- Verkkosivuston osat, mukaan lukien S3-ämpäri, Amazon CloudFront jakelu ja Amazon Cognito käyttäjäpooli
- Ladattava esimääritetty selainlaajennussovellus Chrome-selaimille
- Muut tukiresurssit, mukaan lukien IAM-roolit ja -käytännöt (käyttämällä vähiten etuoikeuksia koskevia parhaita käytäntöjä), Amazonin virtuaalinen yksityinen pilvi (Amazon VPC) -resurssit, Amazon EventBridge tapahtuman säännöt ja amazonin pilvikello lokiryhmät.
Pinojen käyttöönotto kestää noin 35–40 minuuttia. Pääpinon tila näkyy CREATE_COMPLETE kun kaikki on käytössä.
Aseta salasana
Kun olet ottanut pinon käyttöön, avaa LMA-verkkokäyttöliittymä ja aseta salasanasi suorittamalla seuraavat vaiheet:
- Avaa antamaasi sähköpostiosoitteeseen saamasi sähköposti, jonka aihe on "Tervetuloa Live Meeting Assistantiin!"
- Avaa selaimesi sähköpostissa näkyvään URL-osoitteeseen. Sinut ohjataan kirjautumissivulle.
- Sähköposti sisältää luodun väliaikaisen salasanan, jolla kirjaudut sisään ja luot oman salasanasi. Käyttäjänimesi on sähköpostiosoitteesi.
- Aseta uusi salasana.
Uuden salasanasi tulee olla vähintään kahdeksan merkin pituinen ja sisältää isoja ja pieniä kirjaimia sekä numeroita ja erikoismerkkejä.
- Noudata ohjeita vahvistaaksesi sähköpostiosoitteesi tai valitse hyppiä tehdä sen myöhemmin.
Olet nyt kirjautunut LMA:han.
Sait myös samanlaisen sähköpostin otsikolla "QnABot Signup Verification Code". Tämä sähköposti sisältää luodun väliaikaisen salasanan, jolla kirjaudut sisään ja luot oman salasanasi QnABot-suunnittelijassa. Käytät QnABot-suunnittelijaa vain, jos haluat mukauttaa LMA-asetuksia ja kehotteita. QnABotin käyttäjänimesi on Admin. Voit asettaa pysyvän QnABot Admin -salasanasi nyt tai pitää tämän sähköpostin turvassa, jos haluat muokata asioita myöhemmin.
Lataa ja asenna Chrome-selainlaajennus
Saat parhaan kokouksen suoratoistokokemuksen asentamalla LMA-selainlaajennuksen (saatavilla tällä hetkellä Chromelle):
- Valita Lataa Chrome-laajennus ladataksesi selaimen laajennuksen .zip-tiedoston (
lma-chrome-extension.zip
). - Valitse (napsauta hiiren oikealla painikkeella) ja laajenna .zip-tiedosto (
lma-chrome-extension.zip
) luodaksesi paikallisen kansion nimeltälma-chrome-extension
. - Avaa Chrome ja kirjoita linkki
chrome://extensions
osoiteriville. - Enable kehittäjätila.
- Valita Kuorma purettuna, siirry kohtaan
lma-chrome-extension
kansio (jonka purit latauksesta) ja valitse valita. Tämä lataa laajennuksen. - Kiinnitä uusi LMA-laajennus selaimen työkalupalkkiin, jotta voit käyttää sitä helposti – käytät sitä usein kokoustesi suoratoistoon!
Aloita LMA:n käyttö
LMA tarjoaa kaksi suoratoistovaihtoehtoa:
- Chrome -selainlaajennus – Käytä tätä äänen ja kaiuttimen metatietojen suoratoistamiseen kokousselainsovelluksesta. Se toimii tällä hetkellä Zoomin ja Chimen kanssa, mutta toivomme lisäävämme kokoussovelluksia.
- LMA Stream Audio -välilehti – Käytä tätä äänen suoratoistoon mikrofonista ja mistä tahansa Chrome-selainpohjaisesta kokoussovelluksesta, softphonesta tai äänisovelluksesta.
Seuraavissa osioissa näytämme, kuinka voit käyttää molempia vaihtoehtoja.
Käytä Chrome-selainlaajennusta Zoom-puhelun suoratoistoon
Suorita seuraavat vaiheet käyttääksesi selainlaajennusta:
- Avaa LMA-laajennus ja kirjaudu sisään LMA-tunnistetiedoillasi.
- Liity tai aloita Zoom-kokous verkkoselaimessa (älä käytä erillistä Zoom-ohjelmaa).
Jos Zoom-kokoussivu on jo ladattu, lataa se uudelleen.
LMA-laajennus havaitsee automaattisesti, että Zoom on käynnissä selainvälilehdellä, ja lisää nimesi ja kokouksen nimesi.
- Kerro muille puhelun osallistujille, että olet aloittamassa puhelun nauhoittamista LMA:n avulla, ja hanki heiltä lupa. Älä jatka, jos osallistujat vastustavat.
- Valita Aloita kuuntelu.
- Lue ja hyväksy vastuuvapauslauseke ja valitse allow jakaa selainvälilehti.
LMA-laajennus tunnistaa ja näyttää aktiivisen kaiuttimen automaattisesti puhelun aikana. Jos olet kokouksessa yksin, kutsu joitain ystäviä liittymään ja huomaa, että nimet, joita he käyttivät liittyessään puheluun, näkyvät alaliittymässä, kun he puhuvat, ja ne liittyvät heidän sanoihinsa LMA-transkriptiossa.
- Valita Avaa LMA:ssa nähdäksesi reaaliaikaisen transkription uudella välilehdellä.
- Valitse haluamasi transkriptiokieli ja ole vuorovaikutuksessa kokousavustajan kanssa käyttämällä herätyslausetta "OK Assistant!" tai Kokousavustaja Bot ruudussa.
- KYSY ASUSTAJALTA -painike pyytää kokousavustajapalvelua (Amazon Bedrock -tietokanta) ehdottamaan hyvää vastausta kokouksen viimeaikaisten vuorovaikutusten transkription perusteella. Kilometrimääräsi voi vaihdella, joten kokeile!
- Kun olet valmis, valitse Lopeta suoratoisto lopettaa kokouksen LMA:ssa.
Muutamassa sekunnissa automatisoidut kokouksen lopun yhteenvedot tulevat näkyviin ja äänitallenne tulee saataville. Voit jatkaa botin käyttöä puhelun päätyttyä.
Käytä LMA-käyttöliittymän Stream Audio -välilehteä suoratoistoon mikrofonistasi ja mistä tahansa selainpohjaisesta äänisovelluksesta
Selainlaajennus on kätevin tapa suoratoistaa metadataa ja ääntä tuetuista kokousverkkosovelluksista. Voit kuitenkin käyttää LMA:ta myös vain äänen suoratoistamiseen mistä tahansa selainpohjaisesta ohjelmistopuhelimesta, kokoussovelluksesta tai muusta Chrome-selaimessa toistettavasta äänilähteestä kätevän Stream Audio -välilehti, joka on sisäänrakennettu LMA-käyttöliittymään.
- Avaa mikä tahansa äänilähde selaimen välilehdellä.
Tämä voi olla esimerkiksi softphone (esim Google Voice), toisessa kokoussovelluksessa tai demotarkoituksiin voit toistaa paikallisen äänitallenteen tai YouTube-videon selaimessasi emuloidaksesi toista kokouksen osallistujaa. Jos haluat vain kokeilla sitä, avaa seuraava YouTube-video uudella välilehdellä.
- Valitse LMA-sovelluksen käyttöliittymästä Suoratoista ääntä (ei laajennusta) avataksesi Stream Audio -välilehden.
- varten Kokouksen tunnus, anna kokouksen tunnus.
- varten Nimi, anna itsellesi nimi (koskee ääntä mikrofonistasi).
- varten Osallistujan nimet, kirjoita osallistujien nimet (koskee saapuvaa äänilähdettä).
- Valita Aloita Streaming.
- Valitse aiemmin avaamasi selaimen välilehti ja valitse allow jakaa.
- Valitse LMA-käyttöliittymä -välilehti uudelleen nähdäksesi uuden kokoustunnuksesi luettelossa ja kokouksen muodossa Edistyminen.
- Valitse kokouksen tunnus avataksesi lisätietosivun ja katsoa tulevan äänen transkriptio, joka liittyy antamiesi osallistujien nimiin. Jos puhut, näet oman äänesi transkription.
Käytä Stream Audio ominaisuus, jonka avulla voit suoratoistaa mistä tahansa softphone-sovelluksesta, kokoussovelluksesta tai mistä tahansa muusta selaimessa toistettavasta äänentoistosta yhdessä valitsemastasi mikrofonista tallennetun äänen kanssa. Hanki aina lupa muilta, ennen kuin tallennat ne käyttämällä LMA:ta tai muuta tallennussovellusta.
Käsittelykulun yleiskatsaus
Miten LMA litteroi ja analysoi kokouksesi? Katsotaanpa, miten se toimii. Seuraava kaavio näyttää tärkeimmät arkkitehtoniset komponentit ja kuinka ne sopivat yhteen korkealla tasolla.
LMA-käyttäjä liittyy kokoukseen selaimessaan, ottaa käyttöön LMA-selainlaajennuksen ja todennetaan käyttämällä LMA-kirjautumistietoja. Jos LMA-laajennus tukee kokoussovellusta (esimerkiksi Zoom.us), laajennus tunnistaa automaattisesti käyttäjän nimen, kokouksen nimen ja aktiivisten puhujien nimet. Jos laajennus ei tue kokoussovellusta, LMA-käyttäjä voi kirjoittaa nimensä ja kokouksen aiheen manuaalisesti – aktiivisten puhujien nimiä ei tunnisteta.
Saatuaan luvan muilta osallistujilta LMA-käyttäjä valitsee Aloita kuuntelu LMA-laajennusruudusta. Suojattu WebSocket-yhteys muodostetaan ennalta määritettyyn LMA-pinon WebSocket-URL-osoitteeseen, ja käyttäjän todennustunnus tarkistetaan. LMA-selainlaajennus lähettää WebSocketiin START-viestin, joka sisältää kokouksen metatiedot (nimi, aihe ja niin edelleen), ja alkaa suoratoistaa kaksikanavaista ääntä käyttäjän mikrofonista ja saapuvasta äänikanavasta, joka sisältää muiden kokouksen osallistujien äänet. Laajennus tarkkailee kokoussovellusta havaitakseen aktiiviset puhujan muutokset puhelun aikana ja lähettää metatiedot WebSocketille, jolloin LMA voi merkitä puhesegmentit puhujan nimellä.
Fargatessa toimiva WebSocket-palvelin kuluttaa reaaliaikaiset kaksikanavaiset audiofragmentit saapuvasta WebSocket-virrasta. Ääni striimataan Amazon Transcribe -palveluun, ja transkription tulokset kirjoitetaan reaaliajassa Kinesis Data Streamsiin.
Kukin kokouksen käsittelyistunto jatkuu, kunnes käyttäjä valitsee Lopeta kuuntelu LMA-laajennusruudussa tai lopettaa kokouksen ja sulkee välilehden. Puhelun lopussa toiminto luo stereotallennustiedoston Amazon S3:ssa (jos tallennus oli käytössä, kun pino otettiin käyttöön).
Lambda-toiminto, nimeltään Call Event Processor, jota syöttää Kinesis Data Streams, käsittelee ja valinnaisesti rikastaa tapaamisen metadataa ja transkriptioosia. Puhelutapahtumaprosessori integroituu kokousapupalveluihin. LMA:n virtalähteenä on Amazon-Lex, Knowledge Bases for Amazon Bedrock ja Amazon Bedrock LLM:t, jotka käyttävät avointa lähdekoodia QnABot AWS-ratkaisussa vastaamaan usein kysyttyihin kysymyksiin ja järjestämään pyyntöjen reititystä asianmukaiseen tekoälypalveluun. Puhelutapahtuman prosessori käynnistää myös Transcript Summarization Lambda -toiminnon puhelun päättyessä luodakseen yhteenvedon kutsusta koko transkriptista.
Puhelutapahtumien prosessoritoiminto on yhteydessä AWS AppSynciin muutosten (mutaatioiden) säilyttämiseksi Amazon DynamoDB ja lähettää reaaliaikaisia päivityksiä LMA-käyttäjän sisäänkirjautuneille web-asiakkaille (jotka avataan kätevästi valitsemalla selainlaajennuksesta Avaa LMA:ssa -vaihtoehto).
LMA-verkkokäyttöliittymän resurssit isännöidään Amazon S3:ssa ja palvellaan CloudFrontin kautta. Todennuksen tarjoaa Amazon Cognito.
Kun käyttäjä on todennettu, verkkosovellus muodostaa suojatun GraphQL-yhteyden AWS AppSync API:hen ja tilaa reaaliaikaiset tapahtumat, kuten uudet puhelut ja puhelun tilan muutokset kokousluettelosivulle sekä uudet tai päivitetyt transkriptioosat ja lasketut tiedot. kokouksen tietosivun analytiikka. Kun käännös on käytössä, verkkosovellus on myös turvallisessa vuorovaikutuksessa Amazon Translate -sovelluksen kanssa kääntääkseen kokouksen transkription valitulle kielelle.
Koko prosessointikulku, puheesta reaaliaikaisiin verkkosivupäivityksiin, on tapahtumalähtöistä, ja päästä päähän -viive on lyhyt – yleensä vain muutaman sekunnin.
Valvonta ja vianetsintä
AWS CloudFormation raportoi käyttöönoton epäonnistumisista ja syistä asiaankuuluvissa pinoissa Tapahtumat -välilehti. Katso CloudFormationin vianetsintä apua yleisiin käyttöönottoongelmiin. Varo käyttöönoton epäonnistumisia, jotka johtuvat rajan ylittymisestä. LMA-pinot luovat resursseja, joihin sovelletaan oletustili- ja aluepalvelukiintiöitä, kuten joustavat IP-osoitteet ja NAT-yhdyskäytävät. Kun teet vianmääritystä CloudFormation-pinon vioista, siirry aina epäonnistuneisiin sisäkkäisiin pinoihin löytääksesi ensimmäisen raportoitu sisäkkäisen resurssin virheen – tämä on melkein aina perimmäinen syy.
Amazon Transcriben oletusarvo on 25 samanaikaista transkriptiovirtaa, mikä rajoittaa LMA:n 25 samanaikaiseen kokoukseen tietyllä AWS-tilillä tai alueella. Pyydä lisäystä samanaikaisten HTTP/2-striimien määrään suoratoiston transkriptiota varten, jos sinulla on paljon käyttäjiä ja sinun on käsiteltävä tililläsi suurempi määrä samanaikaisia kokouksia.
LMA tarjoaa ajonaikaisen seurannan ja lokit jokaiselle komponentille CloudWatchin avulla:
- WebSocketin käsittely ja transkriptio Fargate-tehtävä - Päällä Amazonin elastisten säiliöiden palvelu (Amazon ECS) -konsoli, siirry kohtaan Klusterit sivu ja avaa LMA-
WEBSOCKETSTACK-xxxx-TranscribingCluster
toiminto. Valitse Tehtävät -välilehti ja avaa tehtäväsivu. Valita Lokit ja Katso CloudWatchissa tarkistaaksesi WebSocket-transkription tehtävälokit. - Call Event Processor Lambda-toiminto – Avaa Lambda-konsolissa
LMA-AISTACK-CallEventProcessor
toiminto. Valitse monitori -välilehti nähdäksesi funktiometrit. Valita Tarkastele lokeja CloudWatchissa toimintolokien tarkistamiseen. - AWS AppSync API – Avaa AWS AppSync -konsolissa
CallAnalytics-LMA
API. Valita Seuranta navigointiruudussa nähdäksesi API-tiedot. Valita Tarkastele lokeja CloudWatchissa tarkastaaksesi AWS AppSync API -lokeja.
Lisätietoja QnABotista AWS for Meeting Assistissa on kohdassa Kokousavustaja README, ja QnABot-ratkaisun käyttöönottoopas lisätietoja.
Kustannusarvio
LMA tarjoaa WebSocket-palvelimen, joka käyttää Fargate- (2vCPU)- ja VPC-verkkoresursseja ja maksaa noin 0.10 dollaria tunnissa (noin 72 dollaria kuukaudessa). Katso lisätietoja AWS Fargate -hinnoittelu.
LMA on käytössä QnABotin ja Amazon Bedrockin Knowledge Basesin avulla. Luot oman tietopohjasi, jota käytät LMA:ssa ja mahdollisesti muissa käyttötapauksissa. Katso lisätietoja Amazonin kallioperän hinnoittelu. QnABot-ratkaisun käyttämät AWS-lisäpalvelut maksavat noin 0.77 dollaria/tunti. Katso lisätietoja luettelosta QnABot on AWS-ratkaisu maksaa.
Loput ratkaisukustannukset perustuvat käyttöön.
Käyttökustannukset ovat yhteensä noin 0.17 dollaria 5 minuutin puhelulta, vaikka tämä voi vaihdella valittujen vaihtoehtojen (kuten käännös), LLM-yhteenvetojen lukumäärän ja kokonaiskäytön mukaan, koska käyttö vaikuttaa Free Tier -kelpoisuuteen ja monien palvelujen volyymiporrastettuun hinnoitteluun. . Lisätietoja palveluista, joista aiheutuu käyttökustannuksia, on osoitteessa:
Voit tutkia LMA-kustannuksia itse käyttämällä AWS-kustannuslaskuri tai valitse Laskun tiedot AWS Billing Dashboardissa nähdäksesi kuukausittaisen kulutuksen palvelukohtaisesti.
Mukauta käyttöönottoasi
Käytä seuraavia CloudFormation-malliparametreja, kun luot tai päivität pinoa mukauttaaksesi LCA-käyttöönottoasi:
- Jos haluat käyttää omaa S3-ämpäriäsi kokousten tallentamiseen, käytä Soita Audio Recordings -ryhmän nimi ja Äänitiedoston etuliite.
- Poista henkilötiedot transkriptioista valitsemalla Ota sisällönmuokkaus käyttöön transkriptioissa totta ja säädä Transkription henkilökohtaisten tunnistetietojen editointientiteettityypit tarvittaessa. Katso lisätietoja Henkilötietojen poistaminen tai tunnistaminen reaaliaikaisessa streamissa.
- Paranna teknisten ja verkkotunnuskohtaisten lyhenteiden ja ammattislangien transkription tarkkuutta määrittämällä Transkriptio mukautetun sanaston nimi mukautetun sanaston nimeen, jonka olet jo luonut Amazon Transcribessa tai määrittänyt Transkription mukautetun kielen mallin nimi aiemmin luodun mukautetun kielimallin nimeen. Katso lisätietoja Transkription tarkkuuden parantaminen.
- Jos haluat litteroida kokoukset muulla tuetulla kielellä kuin Yhdysvaltain englanniksi, valitse haluamasi arvo Transkription kieli.
- Voit mukauttaa transkription käsittelyä valinnaisesti määrittämällä Lambda-koukkutoiminto ARN mukautetun transkription segmenttien käsittelyyn oman lambda-funktiosi ARN-arvoon. Katso lisätietoja Lambda-funktion käyttäminen valinnaisesti mukautetun logiikan tarjoamiseksi transkriptin käsittelyyn.
- Jos haluat mukauttaa QnABot on AWS -ratkaisuun, Amazon Lexiin, Amazon Bedrockiin ja Amazon Bedrock -integraatioon tarkoitettuihin Knowledge Bases -ratkaisuihin perustuvia kokousapuominaisuuksia, katso Kokousavustaja README.
- Jos haluat mukauttaa transkription yhteenvetoa määrittämällä LMA:n kutsumaan omaa Lambda-toimintoasi, katso Transkription yhteenveto LAMBDA-vaihtoehto.
- Jos haluat mukauttaa transkription yhteenvetoa muokkaamalla oletuskehotteita tai lisäämällä uusia, katso Transkription yhteenveto.
- Jos haluat muuttaa säilytysaikaa, aseta Tietueen vanheneminen päivinä haluttuun arvoon. Kaikki puhelutiedot poistetaan pysyvästi LMA DynamoDB -tallennustilasta tämän ajanjakson jälkeen. Tämän asetuksen muutokset koskevat vain päivityksen jälkeen vastaanotettuja uusia puheluita.
LMA on avoimen lähdekoodin projekti. Voit muodostaa LMA GitHub -arkiston, parantaa koodia ja lähettää meille vetopyyntöjä, jotta voimme sisällyttää ja jakaa parannuksiasi!
Päivitä olemassa oleva LMA-pino
Voit päivittää nykyisen LMA-pinosi uusimpaan versioon. Katso lisätietoja Päivitä olemassa oleva pino.
Puhdistaa
Onnittelut! Olet suorittanut kaikki vaiheet live-puhelun analytiikkamalliratkaisun määrittämiseksi AWS-palveluiden avulla.
Kun olet lopettanut tämän esimerkkiratkaisun kokeilun, puhdista resurssit AWS CloudFormation -konsolin avulla ja poista käyttöön ottamasi LMA-pinot. Tämä poistaa resurssit, jotka on luotu ottamalla käyttöön ratkaisu. Tallennus S3-säilöt, DynamoDB-taulukko ja CloudWatch-lokiryhmät säilytetään pinon poistamisen jälkeen, jotta tietosi eivät poistuisi.
Live Call Analytics: kumppaniratkaisu
Kumppaniratkaisumme, Live Call Analytics ja Agent Assist (LCA) tarjoaa reaaliaikaista transkriptiota ja analytiikkaa yhteyskeskuksille (puheluille) kokousten sijaan. On monia yhtäläisyyksiä – itse asiassa LMA rakennettiin käyttämällä arkkitehtuuria ja monia LCA:sta johdettuja komponentteja.
Yhteenveto
Live Meeting Assistant -malliratkaisu tarjoaa joustavan, monipuolisen ja muokattavan lähestymistavan reaaliaikaisen kokouksen avun parantamiseksi tuottavuuden parantamiseksi kokousten aikana ja niiden jälkeen. Se käyttää Amazon AI/ML -palveluita, kuten Amazon Transcribe, Amazon Lex, Knowledge Bases for Amazon Bedrock ja Amazon Bedrock LLMs litteroimaan ja poimimaan reaaliaikaisia näkemyksiä kokousäänestäsi.
Esimerkki LMA-sovelluksesta toimitetaan avoimena lähdekoodina – käytä sitä oman ratkaisusi lähtökohtana ja auta meitä parantamaan sitä tarjoamalla korjauksia ja ominaisuuksia GitHub-pulssipyyntöjen kautta. Selaa kohtaan LMA GitHub -arkisto tutkiaksesi koodia, valitse Katso saada ilmoituksia uusista julkaisuista ja tarkista LUEMINUT uusimmat dokumentaatiopäivitykset.
Asiantuntija-apua varten, AWS-asiantuntijapalvelut ja muut AWS-kumppanit ovat täällä auttamassa.
Haluaisimme kuulla sinusta. Kerro meille mielipiteesi kommenttiosiossa tai käytä keskustelupalstaa LMA GitHub -arkisto.
Tietoja kirjoittajista
Bob Strahan on johtava ratkaisuarkkitehti AWS Language AI Services -tiimissä.
Chris Lott on pääratkaisuarkkitehti AWS AI Language Services -tiimissä. Hänellä on 20 vuoden kokemus yritysohjelmistojen kehittämisestä. Chris asuu Sacramentossa Kaliforniassa ja nauttii puutarhanhoidosta, ilmailusta ja matkustamisesta ympäri maailmaa.
Babu Srinivasan on Sr. Specialist SA – Language AI -palvelut AWS:n World Wide Specialist -organisaatiossa, jolla on yli 24 vuoden kokemus IT-alalta ja viimeiset 6 vuotta keskittynyt AWS Cloudiin. Hän on intohimoinen AI/ML:stä. Työn ulkopuolella hän nauttii puuntyöstä ja viihdyttää ystäviä ja perhettä (joskus tuntemattomia) taikuudella.
Kishore Dhamodaran on AWS:n vanhempi ratkaisuarkkitehti.
Gillian Armstrong on Builder Solutions -arkkitehti. Hän on innoissaan siitä, kuinka pilvi avaa mahdollisuuksia useammalle ihmiselle käyttää teknologiaa ongelmien ratkaisemiseen, ja on erityisen innoissaan siitä, kuinka kognitiiviset tekniikat, kuten keskustelullinen tekoäly, antavat meille mahdollisuuden olla vuorovaikutuksessa tietokoneiden kanssa inhimillisemmin.
- SEO-pohjainen sisällön ja PR-jakelu. Vahvista jo tänään.
- PlatoData.Network Vertical Generatiivinen Ai. Vahvista itseäsi. Pääsy tästä.
- PlatoAiStream. Web3 Intelligence. Tietoa laajennettu. Pääsy tästä.
- PlatoESG. hiili, CleanTech, energia, ympäristö, Aurinko, Jätehuolto. Pääsy tästä.
- PlatonHealth. Biotekniikan ja kliinisten kokeiden älykkyys. Pääsy tästä.
- Lähde: https://aws.amazon.com/blogs/machine-learning/live-meeting-assistant-with-amazon-transcribe-amazon-bedrock-and-knowledge-bases-for-amazon-bedrock/
- :on
- :On
- :ei
- $ YLÖS
- 10
- 100
- 152
- 17
- 180
- 20
- 20 vuotta
- 210
- 24
- 25
- 258
- 361
- 66
- 7
- 710
- 75
- 8
- 937
- a
- Meistä
- Hyväksyä
- pääsy
- Tili
- Tilit
- tarkkuus
- Toiminta
- aktivoida
- aktiivinen
- lisätä
- lisää
- lisä-
- lisäinformaatio
- osoite
- osoitteet
- säätää
- admin
- Aerospace
- Jälkeen
- uudelleen
- vastaan
- Agentti
- AI
- Tekoälyn palvelut
- AI / ML
- Kaikki
- sallia
- Salliminen
- melkein
- yksin
- pitkin
- jo
- Myös
- Vaikka
- aina
- Amazon
- Amazon Cognito
- Amazon-Lex
- Amazonin transkriptio
- Amazon Käännä
- Amazon Web Services
- an
- Analytics
- analysoida
- ja
- Toinen
- vastaus
- vastauksia
- Kaikki
- api
- sovelluksen
- näyttää
- Hakemus
- sovellettu
- käyttää
- lähestymistapa
- sopiva
- suunnilleen
- sovellukset
- arkkitehtuurin
- arkkitehtuuri
- OVAT
- Armstrong
- AS
- Varat
- auttaa
- Apu
- Avustaja
- At
- huomio
- audio-
- todennettu
- todentaa
- Authentication
- Automatisoitu
- automaattisesti
- saatavissa
- välttää
- AWS
- AWS-pilven muodostuminen
- takaisin
- baari
- pohja
- perustua
- BE
- koska
- tulee
- ollut
- ennen
- PARAS
- parhaat käytännöt
- Paremmin
- laskutus
- bob
- Bot
- sekä
- laatikot
- merkki
- selain
- rakentaa
- rakentaja
- rakennettu
- mutta
- nappia
- by
- Kalifornia
- soittaa
- nimeltään
- Puhelut
- CAN
- kyvyt
- kaapata
- kiinni
- kaappaa
- kortti
- tapaus
- tapauksissa
- paini
- kiinni
- Aiheuttaa
- aiheutti
- syyt
- keskuksissa
- haaste
- muuttaa
- Muutokset
- Kanava
- merkkejä
- jutella
- tarkastaa
- soida
- valinta
- Valita
- valitsi
- valita
- chris
- kromi
- kromi-selain
- puhdas
- napsauttaa
- asiakas
- asiakkaat
- Sulkee
- pilvi
- koodi
- kognitiivinen
- tuleva
- Tulossa pian
- kommentit
- Yhteinen
- seuralainen
- Yrityksen
- Valmistunut
- Suoritettuaan
- komponentti
- osat
- laskettu
- tietokoneet
- samanaikainen
- konfigurointi
- liitäntä
- Console
- kuluttaa
- ottaa yhteyttä
- sisältää
- Kontti
- sisältää
- pitoisuus
- tausta
- asiayhteyteen
- jatkaa
- edistää
- Mukava
- sopivasti
- Keskustelu
- puhekielen
- keskusteleva AI
- kopio
- Yrityksen
- oikein
- vastaava
- Hinta
- kustannukset
- voisi
- luoda
- luotu
- luo
- Luominen
- Valtakirja
- Nykyinen
- Tällä hetkellä
- asiakassuhde
- muokattavissa
- räätälöidä
- kojelauta
- tiedot
- Päivämäärät
- oletusarvo
- esittely
- sijoittaa
- käyttöön
- levityspinnalta
- käyttöönotto
- johdettu
- Suunnittelija
- haluttu
- yksityiskohdat
- havaita
- havaittu
- Kehittäjä
- Kehitys
- kaavio
- DID
- suunnattu
- suoraan
- vastuuvapauslauseke
- näyttöön
- näytöt
- jakelu
- do
- dokumentointi
- asiakirjat
- verkkotunnuksen
- Domain Name
- verkkotunnuksia
- tehty
- Dont
- download
- ajanut
- kaksi
- aikana
- kukin
- Aikaisemmin
- Itään
- helppo
- kahdeksan
- kelpoisuus
- mahdollistaa
- käytössä
- mahdollistaa
- mahdollistaa
- loppu
- päittäin
- päättyi
- päätepiste
- päättyy
- Englanti
- parantaa
- rikastaa
- rikastaminen
- enter
- astui sisään
- yritys
- yritysohjelmistot
- Koko
- kokonaisuus
- virheet
- erityisesti
- vakiintunut
- laatii
- eettinen
- tapahtuma
- Tapahtumat
- EVER
- kaikki
- esimerkki
- ylitetty
- innoissaan
- olemassa
- Laajentaa
- odottaa
- experience
- kokenut
- kokeileminen
- asiantuntija
- päättyminen
- tutkia
- laajentaminen
- uute
- tosiasia
- Epäonnistui
- Epäonnistuminen
- epäonnistumisia
- perhe
- Ominaisuus
- Ominaisuudet
- Fed
- harvat
- filee
- Löytää
- Etunimi
- sovittaa
- korjaukset
- joustava
- virtaus
- keskityttiin
- jälkeen
- varten
- haarukka
- foorumit
- Ilmainen
- ystäviä
- alkaen
- koko
- toiminto
- tehtävät
- g1
- yhdyskäytäviä
- tuottaa
- syntyy
- tuottaa
- saada
- saada
- GitHub
- tietty
- hyvä
- graphql
- Ryhmän
- käsi
- kahva
- Olla
- he
- kuulla
- auttaa
- tätä
- Korkea
- pitää
- toivoa
- isännöi
- Miten
- Miten
- Kuitenkin
- HTML
- http
- HTTPS
- ihmisen
- i
- ID
- tunnistettavissa
- tunnistaminen
- Identiteetti
- if
- täytäntöönpano
- tärkeä
- parantaa
- in
- Mukaan lukien
- Saapuva
- sisällyttää
- Kasvaa
- tiedot
- oivalluksia
- asentaa
- integroi
- integraatio
- olla vuorovaikutuksessa
- vuorovaikutukset
- vuorovaikutuksessa
- liitäntä
- rajapinnat
- tulee
- kutsu
- vedotaan
- IP
- IP-osoitteita
- kysymykset
- IT
- kohdetta
- SEN
- ammattikieli
- yhdistää
- Liitosten
- jpg
- vain
- Pitää
- pitää
- Kinesis-tietovirrat
- Tietää
- tuntemus
- Merkki
- Kieli
- kielet
- suuri
- suurempi
- Sukunimi
- Myöhään
- Viive
- myöhemmin
- uusin
- Viimeisin julkaisu
- käynnistää
- vähiten
- jättää
- juridinen
- Pituus
- antaa
- Taso
- pitää
- Todennäköisesti
- RAJOITA
- rajat
- LINK
- Lista
- lueteltu
- Kuunteleminen
- elää
- Lives
- OTK
- kuormitus
- kuormat
- paikallinen
- log
- kirjattu
- logiikka
- Kirjaudu sisään
- katso
- rakkaus
- taika-
- tärkein
- tehdä
- hoitaa
- onnistui
- johto
- käsin
- monet
- Saattaa..
- ehkä
- kokous
- kokoukset
- jäsen
- viesti
- Metadata
- Metrics
- mikrofoni
- minuuttia
- malli
- mallit
- seuranta
- näytöt
- lisää
- eniten
- moninkertainen
- täytyy
- nimi
- nimetty
- nimet
- Navigoida
- suunnistus
- välttämätön
- Tarve
- tarvitaan
- tarpeet
- verkostoituminen
- Uusi
- Uusimmat
- Nro
- Huomautuksia
- nyt
- numero
- numerot
- objekti
- tarkkailla
- saada
- of
- Tarjoukset
- usein
- on
- ONE
- yhdet
- vain
- avata
- avoimen lähdekoodin
- avattu
- avaaminen
- Mahdollisuudet
- Vaihtoehto
- Vaihtoehdot
- or
- Oregon
- organisaatio
- Muut
- Muut osallistujat
- Muuta
- muuten
- meidän
- ulos
- ulkopuolella
- yli
- oma
- omistajat
- sivulla
- lasi
- parametrit
- osa
- osallistuja
- osallistujat
- intohimoinen
- Salasana
- Maksaa
- Ihmiset
- aika
- pysyvä
- vakinaisesti
- lupa
- Oikeudet
- Henkilökohtaisesti
- puhelin
- puheluista
- kuva
- Platon
- Platonin tietotieto
- PlatonData
- Pelaa
- pelaa
- kytkeä
- plus
- Kohta
- politiikkaa
- Suosittu
- mahdollinen
- Kirje
- mahdollisesti
- teho
- powered
- käytännöt
- Suositut
- estää
- aiemmin
- hinnoittelu
- Pääasiallinen
- yksityinen
- etuoikeus
- todennäköisesti
- ongelmia
- jatkaa
- Prosessit
- käsittely
- Suoritin
- tuottavuus
- ammatillinen
- kielletty
- projekti
- ohjeita
- toimittaa
- mikäli
- tarjoaa
- tarjoamalla
- julkaista
- tarkoituksiin
- QnABot
- kyselyt
- kysymys
- kysymykset
- nopea
- nopeasti
- pikemminkin
- todellinen
- reaaliaikainen
- vastaanottaa
- sai
- äskettäinen
- ennätys
- äänitys
- asiakirjat
- katso
- alue
- vapauta
- Tiedotteet
- merkityksellinen
- jäljellä oleva
- kuunnella
- Raportit
- säilytyspaikka
- pyyntö
- pyynnöt
- resurssi
- Esittelymateriaalit
- vastaus
- vastuullinen
- rajoitukset
- tulokset
- säilyttäminen
- Napsauta hiiren kakkospainikkeella
- Rooli
- roolit
- juuri
- reititys
- säännöt
- juoksu
- toimii
- runtime
- ajonaikainen seuranta
- s
- SA
- Sacramento
- turvallista
- Said
- sama
- näyte
- sanoa
- sanonta
- sekuntia
- Osa
- osiot
- turvallinen
- turvallisesti
- nähdä
- segmentti
- segmentit
- valittu
- valinta
- lähettää
- lähettää
- vanhempi
- erillinen
- palveli
- palvelin
- palvelu
- Palvelut
- Istunto
- setti
- asetus
- settings
- Jaa:
- hän
- näyttää
- näyttää
- esitetty
- Näytä
- samankaltainen
- Yksinkertainen
- yksinkertaisesti
- So
- Tuotteemme
- ohjelmistokehitys
- ratkaisu
- Ratkaisumme
- SOLVE
- jonkin verran
- Joku
- jotain
- joskus
- pian
- lähde
- Lähteet
- puhua
- Kaiutin
- erityinen
- asiantuntija
- puhe
- viettää
- pino
- Stacks
- itsenäinen
- Alkaa
- Aloita
- alkaa
- Tila
- Askeleet
- stop
- Levytila
- verkkokaupasta
- tallennettu
- suora
- virta
- virtasi
- streaming
- puroihin
- aihe
- niin
- ehdottaa
- yhteenveto
- YHTEENVETO
- tuki
- Tuetut
- Tukea
- Tukee
- varma
- taulukko
- ottaa
- ottaen
- puhuminen
- Tehtävä
- joukkue-
- tiimit
- Tekninen
- Technologies
- Elektroniikka
- sapluuna
- malleja
- tilapäinen
- terminologia
- teksti
- kuin
- että
- -
- maailma
- heidän
- Niitä
- sitten
- Siellä.
- Nämä
- ne
- asiat
- ajatella
- tätä
- porras
- aika
- kertaa
- Otsikko
- että
- yhdessä
- symbolinen
- työkalu
- aihe
- Yhteensä
- raita
- Jäljennös
- Kääntää
- Kääntäminen
- Matkustaminen
- totta
- luotettu
- yrittää
- yrittää
- kaksi
- ui
- ymmärtää
- asti
- Päivitykset
- päivitetty
- Päivitykset
- päivittäminen
- URL
- us
- Käyttö
- käyttää
- käytetty
- hyödyllinen
- käyttäjä
- Käyttöliittymä
- Käyttäjät
- käyttötarkoituksiin
- käyttämällä
- yleensä
- pätevä
- validoitu
- arvo
- arvot
- vaihdella
- Vahvistus
- todentaa
- kautta
- Video
- Näytä
- virginia
- Virtual
- Ääni
- ÄÄNTÄ
- tilavuus
- Herätä
- haluta
- oli
- Katso
- Tapa..
- tavalla
- we
- verkko
- Web-sovellus
- Web-selain
- verkkopalvelut
- verkkopistorasia
- HYVIN
- olivat
- Länsi
- Mitä
- kun
- joka
- vaikka
- leveä
- tulee
- with
- ilman
- ihme
- sanoja
- Referenssit
- toimii
- maailman-
- kirjoittaminen
- kirjallinen
- vuotta
- vielä
- Voit
- Sinun
- itse
- youtube
- zephyrnet
- Postinumero
- zoomaus