Ghi chú cuộc họp là một phần quan trọng của sự cộng tác, tuy nhiên chúng thường bị bỏ sót. Giữa việc dẫn dắt các cuộc thảo luận, lắng nghe kỹ và ghi chú, thông tin chính rất dễ bị trôi đi mà không được ghi lại. Ngay cả khi ghi chú được ghi lại, chúng có thể bị lộn xộn hoặc không đọc được, khiến chúng trở nên vô dụng.
Trong bài đăng này, chúng tôi khám phá cách sử dụng Phiên âm Amazon và nền tảng Amazon để tự động tạo các bản tóm tắt rõ ràng, ngắn gọn về bản ghi video hoặc âm thanh. Cho dù đó là cuộc họp nhóm nội bộ, phiên hội thảo hay cuộc gọi báo cáo thu nhập, phương pháp này có thể giúp bạn chắt lọc nội dung hàng giờ thành những điểm nổi bật.
Chúng tôi hướng dẫn giải pháp ghi lại cuộc họp nhóm dự án và tóm tắt những nội dung quan trọng với Amazon Bedrock. Chúng tôi cũng thảo luận cách bạn có thể tùy chỉnh giải pháp này cho các tình huống phổ biến khác như bài giảng trong khóa học, cuộc phỏng vấn và cuộc gọi bán hàng. Đọc tiếp để đơn giản hóa và tự động hóa quá trình ghi chú của bạn.
Tổng quan về giải pháp
Bằng cách kết hợp Amazon Transcribe và Amazon Bedrock, bạn có thể tiết kiệm thời gian, nắm bắt thông tin chi tiết và tăng cường cộng tác. Amazon Transcribe là dịch vụ nhận dạng giọng nói tự động (ASR) giúp việc thêm khả năng chuyển lời nói thành văn bản vào ứng dụng trở nên đơn giản. Nó sử dụng các công nghệ học sâu tiên tiến để chuyển âm thanh thành văn bản một cách chính xác. Amazon Bedrock là một dịch vụ được quản lý toàn phần cung cấp nhiều lựa chọn mô hình nền tảng (FM) hiệu suất cao từ các công ty AI hàng đầu như AI21 Labs, Anthropic, Cohere, Meta, Stability AI và Amazon với một API duy nhất, cùng với một loạt các khả năng bạn cần để xây dựng các ứng dụng AI tổng quát. Với Amazon Bedrock, bạn có thể dễ dàng thử nghiệm nhiều loại FM hàng đầu và tùy chỉnh riêng chúng với dữ liệu của mình bằng các kỹ thuật như tinh chỉnh và Tạo tăng cường truy xuất (RAG).
Giải pháp được trình bày trong bài đăng này được phối hợp bằng cách sử dụng một Chức năng bước AWS máy trạng thái được kích hoạt khi bạn tải bản ghi lên địa chỉ được chỉ định Dịch vụ lưu trữ đơn giản của Amazon (Amazon S3). Step Functions cho phép bạn tạo quy trình làm việc phi máy chủ để điều phối và kết nối các thành phần trên các dịch vụ AWS. Nó xử lý sự phức tạp cơ bản để bạn có thể tập trung vào logic ứng dụng. Nó hữu ích cho việc điều phối các nhiệm vụ, xử lý phân tán, ETL (trích xuất, chuyển đổi và tải) và tự động hóa quy trình kinh doanh.
Sơ đồ sau đây minh họa kiến trúc giải pháp cấp cao.
Quy trình giải pháp bao gồm các bước sau:
- Người dùng lưu trữ bản ghi trong nhóm nội dung S3.
- Hành động này kích hoạt máy trạng thái sao chép và tóm tắt Step Functions.
- Là một phần của bộ máy trạng thái, một AWS Lambda được kích hoạt, chức năng này sẽ chép lại bản ghi bằng Amazon Transcribe và lưu trữ bản ghi trong nhóm nội dung.
- Hàm Lambda thứ hai truy xuất bản phiên âm và tạo bản tóm tắt bằng mô hình Anthropic Claude trong Amazon Bedrock.
- Cuối cùng, hàm Lambda cuối cùng sử dụng Dịch vụ thông báo đơn giản của Amazon (Amazon SNS) để gửi bản tóm tắt bản ghi cho người nhận.
Giải pháp này được hỗ trợ tại các Khu vực có Anthropic Claude trên Amazon Bedrock có sẵn.
Máy trạng thái sắp xếp các bước để thực hiện các tác vụ cụ thể. Sơ đồ sau đây minh họa quá trình chi tiết.
Điều kiện tiên quyết
Người dùng Amazon Bedrock cần yêu cầu quyền truy cập vào các mô hình trước khi chúng có sẵn để sử dụng. Đây là hành động một lần. Đối với giải pháp này, bạn cần kích hoạt quyền truy cập vào mô hình Anthropic Claude (không phải Anthropic Claude Instant) trong Amazon Bedrock. Để biết thêm thông tin, hãy tham khảo Truy cập mô hình.
Triển khai tài nguyên giải pháp
Giải pháp được triển khai bằng cách sử dụng Hình thành đám mây AWS mẫu, được tìm thấy trên Repo GitHub, để tự động cung cấp các tài nguyên cần thiết trong tài khoản AWS của bạn. Mẫu yêu cầu các tham số sau:
- Địa chỉ email dùng để gửi bản tóm tắt – Bản tóm tắt sẽ được gửi đến địa chỉ này. Bạn phải xác nhận email xác nhận ban đầu của Amazon SNS trước khi nhận được thông báo bổ sung.
- Hướng dẫn tóm tắt – Đây là những hướng dẫn được cung cấp cho mô hình Amazon Bedrock để tạo bản tóm tắt.
Chạy giải pháp
Sau khi bạn triển khai giải pháp bằng AWS CloudFormation, hãy hoàn thành các bước sau:
- Xác nhận xác nhận email của Amazon SNS mà bạn sẽ nhận được trong giây lát sau khi tạo ngăn xếp CloudFormation.
- Trên bảng điều khiển AWS CloudFormation, điều hướng đến ngăn xếp bạn vừa tạo.
- Trên ngăn xếp của Kết quả đầu ra tab và tìm giá trị được liên kết với
AssetBucketName
; nó sẽ trông giống như thếsummary-generator-assetbucket-xxxxxxxxxxxxx
. - Trên bảng điều khiển Amazon S3, hãy điều hướng đến nhóm nội dung của bạn.
Đây là nơi bạn sẽ tải lên bản ghi âm của mình. Các định dạng tệp hợp lệ là MP3, MP4, WAV, FLAC, AMR, OGG và WebM.
- Tải bản ghi của bạn lên
recordings
thư mục.
Việc tải lên bản ghi sẽ tự động kích hoạt máy trạng thái Step Functions. Trong ví dụ này, chúng tôi sử dụng bản ghi cuộc họp nhóm mẫu trong sample-recording
thư mục của kho lưu trữ GitHub.
- Trên bảng điều khiển Step Functions, điều hướng đến máy trạng thái tạo tóm tắt.
- Chọn tên máy trạng thái chạy kèm theo trạng thái Chạy.
Tại đây, bạn có thể xem tiến trình của máy trạng thái khi nó xử lý bản ghi.
- Sau khi nó đạt tới Sự thành công trạng thái, bạn sẽ nhận được bản tóm tắt qua email về bản ghi.
Ngoài ra, bạn có thể điều hướng đến nhóm nội dung S3 và xem bản ghi ở đó trong thư mục bản ghi.
Xem lại bản tóm tắt
Bạn sẽ nhận được bản tóm tắt bản ghi được gửi qua email tới địa chỉ bạn đã cung cấp khi tạo ngăn xếp CloudFormation. Nếu bạn không nhận được email trong giây lát, hãy đảm bảo rằng bạn đã xác nhận email xác nhận của Amazon SNS mà lẽ ra bạn phải nhận được sau khi tạo ngăn xếp rồi tải lại bản ghi lên, thao tác này sẽ kích hoạt quy trình tóm tắt.
Giải pháp này bao gồm bản ghi cuộc họp nhóm mô phỏng mà bạn có thể sử dụng để kiểm tra giải pháp. Bản tóm tắt sẽ trông giống như ví dụ sau. Tuy nhiên, do bản chất của AI sáng tạo, đầu ra của bạn sẽ trông hơi khác một chút nhưng nội dung phải gần gũi.
Dưới đây là những điểm chính từ bản dựng lên:
- Joe đã xem xét xong trạng thái hiện tại cho nhiệm vụ EDU1 và tạo một nhiệm vụ mới để phát triển trạng thái trong tương lai. Nhiệm vụ mới đó đang tồn đọng cần được ưu tiên. Anh ấy hiện đang bắt đầu EDU2 nhưng bị chặn lựa chọn tài nguyên.
- Rob đã tạo chiến lược gắn thẻ cho SLG1 dựa trên các phương pháp hay nhất nhưng có thể cần phải phối hợp với các nhóm khác đã tạo chiến lược của riêng họ để điều chỉnh theo cách tiếp cận thống nhất. Một nhiệm vụ mới đã được tạo để phối hợp các chiến lược gắn thẻ.
- Rob đã tiến hành gỡ lỗi cho SLG2 nhưng có thể cần trợ giúp thêm. Nhiệm vụ này sẽ được chuyển sang Sprint 2 để có thời gian lấy thêm tài nguyên.
Các bước tiếp theo:
- Joe sẽ tiếp tục làm việc trên EDU2 cho đến khi việc lựa chọn tài nguyên được quyết định
- Nhiệm vụ mới cần được ưu tiên để phối hợp các chiến lược gắn thẻ giữa các nhóm
- SLG2 chuyển sang Sprint 2
- Thời gian chờ chuyển sang thứ Hai bắt đầu từ tuần tới
Mở rộng giải pháp
Bây giờ bạn đã có giải pháp hiệu quả, dưới đây là một số ý tưởng tiềm năng để tùy chỉnh giải pháp cho các trường hợp sử dụng cụ thể của bạn:
- Hãy thử thay đổi quy trình để phù hợp với nội dung nguồn có sẵn và kết quả đầu ra mong muốn của bạn:
- Đối với các trường hợp có sẵn bản ghi, hãy tạo quy trình làm việc Step Functions thay thế để nhập bản ghi dựa trên văn bản hoặc PDF hiện có.
- Thay vì sử dụng Amazon SNS để thông báo cho người nhận qua email, bạn có thể sử dụng nó để gửi kết quả đầu ra đến một điểm cuối khác, chẳng hạn như trang web cộng tác nhóm hoặc tới kênh trò chuyện của nhóm.
- Hãy thử thay đổi hướng dẫn tóm tắt tham số ngăn xếp CloudFormation được cung cấp cho Amazon Bedrock để tạo ra kết quả đầu ra cụ thể cho trường hợp sử dụng của bạn (đây là lời nhắc AI tổng quát):
- Khi tóm tắt báo cáo thu nhập của công ty, bạn có thể tập trung vào mô hình vào các cơ hội đầy hứa hẹn tiềm năng, các lĩnh vực quan tâm và những điều bạn nên tiếp tục theo dõi.
- Nếu bạn đang sử dụng tính năng này để tóm tắt một bài giảng trong khóa học, mô hình có thể xác định các bài tập sắp tới, tóm tắt các khái niệm chính, liệt kê các sự kiện và lọc ra bất kỳ cuộc trò chuyện nhỏ nào khỏi bản ghi âm.
- Đối với cùng một bản ghi, hãy tạo các bản tóm tắt khác nhau cho các đối tượng khác nhau:
- Bản tóm tắt của các kỹ sư tập trung vào các quyết định thiết kế, các thách thức kỹ thuật và các sản phẩm sắp bàn giao.
- Bản tóm tắt của người quản lý dự án tập trung vào các mốc thời gian, chi phí, sản phẩm bàn giao và các mục hành động.
- Các nhà tài trợ dự án nhận được thông tin cập nhật ngắn gọn về trạng thái và mức độ leo thang của dự án.
- Để có bản ghi dài hơn, hãy thử tạo bản tóm tắt cho các mức độ quan tâm và cam kết về thời gian khác nhau. Ví dụ: tạo một câu, một đoạn, một trang hoặc tóm tắt chuyên sâu. Ngoài lời nhắc, bạn có thể muốn điều chỉnh
max_tokens_to_sample
tham số để phù hợp với độ dài nội dung khác nhau.
Làm sạch
Để dọn dẹp giải pháp, hãy xóa ngăn xếp CloudFormation mà bạn đã tạo trước đó. Lưu ý rằng việc xóa ngăn xếp sẽ không xóa nhóm nội dung. Nếu không cần bản ghi hoặc bản chép lời nữa, bạn có thể xóa nhóm này một cách riêng biệt. Amazon Transcribe sẽ tự động xóa các công việc chép lại sau 90 ngày, nhưng bạn có thể xóa chúng theo cách thủ công trước đó.
Kết luận
Trong bài đăng này, chúng ta đã khám phá cách sử dụng Amazon Transcribe và Amazon Bedrock để tự động tạo các bản tóm tắt rõ ràng, ngắn gọn về bản ghi video hoặc âm thanh. Chúng tôi khuyến khích bạn tiếp tục đánh giá Amazon Bedrock, Amazon Transcribe và các dịch vụ AI AWS khác, như Văn bản Amazon, Amazon Dịchvà Nhận thức lại Amazon, để xem chúng có thể giúp bạn đạt được mục tiêu kinh doanh như thế nào.
Về các tác giả
Rob Barnes là cố vấn chính cho AWS Professional Services. Anh ấy làm việc với khách hàng của chúng tôi để giải quyết các yêu cầu về bảo mật và tuân thủ trên quy mô lớn trong môi trường AWS phức tạp, nhiều tài khoản thông qua tự động hóa.
Jason Stehle là Kiến trúc sư giải pháp cấp cao tại AWS, có trụ sở tại khu vực New England. Anh làm việc với khách hàng để điều chỉnh khả năng của AWS phù hợp với những thách thức kinh doanh lớn nhất của họ. Ngoài giờ làm việc, anh dành thời gian xây dựng mọi thứ và xem phim truyện tranh cùng gia đình.
- Phân phối nội dung và PR được hỗ trợ bởi SEO. Được khuếch đại ngay hôm nay.
- PlatoData.Network Vertical Generative Ai. Trao quyền cho chính mình. Truy cập Tại đây.
- PlatoAiStream. Thông minh Web3. Kiến thức khuếch đại. Truy cập Tại đây.
- Trung tâmESG. Than đá, công nghệ sạch, Năng lượng, Môi trường Hệ mặt trời, Quản lý chất thải. Truy cập Tại đây.
- PlatoSức khỏe. Tình báo thử nghiệm lâm sàng và công nghệ sinh học. Truy cập Tại đây.
- nguồn: https://aws.amazon.com/blogs/machine-learning/create-summaries-of-recordings-using-generative-ai-with-amazon-bedrock-and-amazon-transcribe/
- : có
- :là
- :không phải
- :Ở đâu
- $ LÊN
- 100
- 7
- 8
- a
- Có khả năng
- truy cập
- chứa
- Tài khoản
- chính xác
- công nhận
- thừa nhận
- ngang qua
- Hoạt động
- thêm vào
- Ngoài ra
- thêm vào
- địa chỉ
- tiên tiến
- Sau
- một lần nữa
- AI
- Dịch vụ AI
- sắp xếp
- cho phép
- dọc theo
- Ngoài ra
- đàn bà gan dạ
- Phiên âm Amazon
- Amazon Web Services
- an
- và
- nhân loại
- bất kì
- api
- Các Ứng Dụng
- các ứng dụng
- phương pháp tiếp cận
- kiến trúc
- LÀ
- KHU VỰC
- khu vực
- AS
- tài sản
- Tài sản
- liên kết
- At
- điều trần
- âm thanh
- tăng cường
- tự động hóa
- Tự động
- tự động
- Tự động hóa
- có sẵn
- xa
- AWS
- Hình thành đám mây AWS
- Dịch vụ chuyên nghiệp của AWS
- dựa
- BE
- bởi vì
- trước
- BEST
- thực hành tốt nhất
- giữa
- Một chút
- bị chặn
- cuốn sách
- rộng
- xây dựng
- Xây dựng
- kinh doanh
- Quy trình kinh doanh
- nhưng
- cuộc gọi
- Cuộc gọi
- CAN
- khả năng
- khả năng
- nắm bắt
- bị bắt
- trường hợp
- trường hợp
- thách thức
- thay đổi
- Kênh
- sự lựa chọn
- giống cá lăng
- Đóng
- chặt chẽ
- hợp tác
- kết hợp
- cam kết
- Chung
- Các công ty
- Của công ty
- hoàn thành
- phức tạp
- phức tạp
- tuân thủ
- các thành phần
- khái niệm
- Liên quan
- ngắn gọn
- Hội nghị
- xác nhận
- Kết nối
- An ủi
- chuyên gia tư vấn
- nội dung
- tiếp tục
- phối hợp
- điều phối
- Chi phí
- có thể
- Khóa học
- tạo
- tạo ra
- Tạo
- quan trọng
- Current
- Tình trạng hiện tại
- khách hàng
- tùy chỉnh
- dữ liệu
- Ngày
- quyết định
- sâu
- học kĩ càng
- triển khai
- triển khai
- Thiết kế
- được chỉ định
- mong muốn
- chi tiết
- phát triển
- khác nhau
- thảo luận
- thảo luận
- phân phối
- dont
- xuống
- Sớm hơn
- Thu nhập
- thu nhập gọi
- dễ dàng
- dễ dàng
- cho phép
- khuyến khích
- Điểm cuối
- Nước Anh
- nâng cao
- môi trường
- đánh giá
- Ngay cả
- ví dụ
- hiện tại
- thử nghiệm
- khám phá
- Khám phá
- thêm
- trích xuất
- sự kiện
- Rơi
- gia đình
- vài
- Tập tin
- lọc
- cuối cùng
- phù hợp với
- Tập trung
- tiếp theo
- Trong
- tìm thấy
- Nền tảng
- từ
- đầy đủ
- chức năng
- chức năng
- tương lai
- tạo ra
- tạo
- tạo ra
- thế hệ
- thế hệ
- Trí tuệ nhân tạo
- được
- GitHub
- được
- lớn nhất
- Xử lý
- Có
- he
- giúp đỡ
- tại đây
- cấp độ cao
- hiệu suất cao
- của mình
- GIỜ LÀM VIỆC
- Độ đáng tin của
- Hướng dẫn
- Tuy nhiên
- HTML
- http
- HTTPS
- ý tưởng
- xác định
- if
- minh họa
- in
- sâu
- bao gồm
- thông tin
- ban đầu
- những hiểu biết
- ngay lập tức
- hướng dẫn
- quan tâm
- nội bộ
- Phỏng vấn
- trong
- IT
- mặt hàng
- ITS
- việc làm
- jpg
- chỉ
- Key
- Phòng thí nghiệm
- hàng đầu
- học tập
- Bài giảng
- đọc
- cho phép
- niveaux
- Lượt thích
- Danh sách
- Listening
- tải
- logic
- còn
- Xem
- máy
- thực hiện
- làm cho
- LÀM CHO
- quản lý
- thủ công
- Có thể..
- Gặp gỡ
- cuộc họp
- Siêu dữ liệu
- kiểu mẫu
- mô hình
- Khoảnh khắc
- Màn Hình
- chi tiết
- chuyển
- Phim Điện Ảnh
- di chuyển
- phải
- tên
- Thiên nhiên
- Điều hướng
- cần thiết
- Cần
- Mới
- tiếp theo
- Không
- ghi
- Chú ý
- thông báo
- thông báo
- tại
- mục tiêu
- of
- Cung cấp
- thường
- on
- Cơ hội
- or
- dàn xếp
- Nền tảng khác
- vfoXNUMXfipXNUMXhfpiXNUMXufhpiXNUMXuf
- ra
- đầu ra
- kết quả đầu ra
- bên ngoài
- riêng
- trang
- tham số
- thông số
- một phần
- Thực hiện
- plato
- Thông tin dữ liệu Plato
- PlatoDữ liệu
- điểm
- Bài đăng
- tiềm năng
- thực hành
- trình bày
- Hiệu trưởng
- ưu tiên
- quá trình
- Quá trình Tự động hóa
- Quy trình
- xử lý
- sản xuất
- chuyên nghiệp
- Tiến độ
- dự án
- hứa hẹn
- cung cấp
- cung cấp
- Đạt
- Đọc
- nhận
- nhận
- nhận
- người nhận
- công nhận
- ghi âm
- xem
- vùng
- vẽ
- kho
- yêu cầu
- Yêu cầu
- đòi hỏi
- tài nguyên
- Thông tin
- xem xét
- chạy
- bán hàng
- tương tự
- Lưu
- Quy mô
- kịch bản
- Thứ hai
- an ninh
- xem
- lựa chọn
- gửi
- cao cấp
- gởi
- kết án
- Không có máy chủ
- dịch vụ
- DỊCH VỤ
- Phiên
- định
- nên
- tương tự
- Đơn giản
- đơn giản hóa
- duy nhất
- website
- tình huống
- nhỏ
- So
- giải pháp
- Giải pháp
- một số
- một cái gì đó
- nguồn
- riêng
- phát biểu
- Speech Recognition
- chuyển lời nói thành văn bản
- Nhà tài trợ
- cuộc đua nước rút
- Tính ổn định
- ngăn xếp
- Bắt đầu
- Tiểu bang
- Trạng thái
- Bước
- Các bước
- là gắn
- cửa hàng
- đơn giản
- chiến lược
- Chiến lược
- như vậy
- tóm tắt
- TÓM TẮT
- Hỗ trợ
- chắc chắn
- Takeaways
- Thảo luận
- Nhiệm vụ
- nhiệm vụ
- nhóm
- đội
- Kỹ thuật
- kỹ thuật
- Công nghệ
- mẫu
- thử nghiệm
- văn bản
- việc này
- Sản phẩm
- Tương lai
- Nhà nước
- cung cấp their dịch
- Them
- sau đó
- Đó
- Kia là
- họ
- điều
- điều này
- Thông qua
- thời gian
- dòng thời gian
- đến
- hàng đầu
- Bảng điểm
- Chuyển đổi
- kích hoạt
- được kích hoạt
- thử
- cơ bản
- cho đến khi
- sắp tới
- Cập nhật
- sử dụng
- ca sử dụng
- đã sử dụng
- vô dụng
- người sử dang
- Người sử dụng
- sử dụng
- sử dụng
- hợp lệ
- giá trị
- nhiều
- thông qua
- Video
- Xem
- đi bộ
- muốn
- là
- Đồng hồ đeo tay
- xem
- we
- web
- các dịch vụ web
- khi nào
- liệu
- cái nào
- CHÚNG TÔI LÀ
- sẽ
- với
- Công việc
- quy trình làm việc
- Luồng công việc
- đang làm việc
- công trinh
- nhưng
- Bạn
- trên màn hình
- zephyrnet