ڈومین کے لیے مخصوص اور زبان کے لیے مخصوص تخصیص کے ساتھ کثیر لسانی دستاویز کے ترجمے کا ورک فلو بنائیں

ڈیجیٹل دنیا میں، مقامی زبان میں معلومات فراہم کرنا کوئی نیا کام نہیں ہے، لیکن یہ ایک مشکل اور مہنگا کام ہوسکتا ہے۔ مشین لرننگ (ML) اور نیچرل لینگویج پروسیسنگ (NLP) میں ترقی نے اس کام کو بہت آسان اور کم خرچ کر دیا ہے۔

ہم نے کثیر لسانی ڈیٹا اور دستاویز پروسیسنگ کے کام کے بوجھ کے لیے ML کو اپنانے میں اضافہ دیکھا ہے۔ انٹرپرائز اور سرکاری صارفین خودکار ایم ایل ترجمے کی خدمات سے فائدہ اٹھانے کے لیے اپنے دستی ترجمہ کے کام کے بوجھ کو منتقل کر رہے ہیں۔ ایمیزون ٹرانسلیٹ ایک ہے۔ عصبی مشین ترجمہ وہ خدمت جو کئی ہزار زبانوں کے جوڑوں کے درمیان تیز، اعلیٰ معیار اور سستی زبان کا ترجمہ فراہم کرتی ہے جو ہم وقت ساز (حقیقی وقت) یا متضاد ترجمے کے کاموں کے لیے استعمال کی جا سکتی ہے۔ دستیاب ترجمے کے جوڑوں کی مکمل فہرست کے لیے، رجوع کریں۔ معاون زبانیں اور زبان کے کوڈز.

ہجرت کرنے والے اور اپنے ترجمے کے کام کے بوجھ کو جدید بنانے والے صارفین کو اپنے کاروباری ڈومین کے لیے ترجمے کو حسب ضرورت بنانے کی اہلیت کی ضرورت ہوتی ہے۔ ترجمہ کے کام کے بوجھ کے لیے علاقائی زبان کی بولیوں یا استعمال کو اپنانے کی صلاحیت کی بھی ضرورت پڑ سکتی ہے۔ مثال کے طور پر، "بزرگ" کا ہسپانوی ترجمہ anciano(a) ہے لیکن پورٹو ریکو میں لفظ envejeciente کو ترجیح دی جاتی ہے۔

اس پوسٹ میں، ہم یہ ظاہر کرتے ہیں کہ ایمیزون ٹرانسلیٹ کی ایکٹیو کسٹم ٹرانسلیشن (ACT) فیچر کو کیسے شامل کیا جائے۔ ہم ڈومین- اور زبان کے ساتھ مخصوص تخصیصات کے ساتھ ایک کثیر لسانی دستاویز کے ترجمے کا ورک فلو بنانے کا ایک حل تجویز کرتے ہیں جس کا آپ جائزہ لے سکتے ہیں اور ضرورت کے مطابق اسے بڑھا سکتے ہیں تاکہ نتائج کو مسلسل بہتر بنایا جا سکے اور اختتامی صارفین کو خوش کیا جا سکے۔

حل جائزہ

ACT اپنی مرضی کے مطابق ترجمہ شدہ آؤٹ پٹ تیار کرتا ہے بغیر کسی حسب ضرورت ترجمے کا ماڈل بنانے اور اسے برقرار رکھنے کی ضرورت کے۔ ACT کا استعمال کرتے ہوئے، Amazon Translate آپ کے ترجمے کے نتائج کو اپنی مرضی کے مطابق بنانے کے لیے متوازی ڈیٹا کے طور پر آپ کی ترجیحی ترجمے کی مثالوں کا استعمال کرے گا، ایک نیا مشین لرننگ ماڈل بنانے اور اس کی تربیت کے لیے درکار وقت اور لاگت کو ختم کرتا ہے۔

اس پوسٹ میں شامل حل اس بات کی وضاحت کرتا ہے کہ کس طرح انسان کے اندر لوپ ورک فلو کو استعمال کرتے ہوئے بنایا جائے۔ Amazon Augmented AI (ایمیزون A2I) اپنی مرضی کے مطابق ترجمہ کو مسلسل بہتر بنانے کے لیے۔ Amazon A2I آپ کے ML ورک فلو میں انسانی نگرانی کو ضم کرنے کا ایک آسان طریقہ فراہم کرتا ہے، جس میں ML تجربے کی ضرورت نہیں ہے۔ Amazon A2I انسانی فیصلے اور AI کو کسی بھی ML ایپلیکیشن میں ضم کرنا آسان بناتا ہے، قطع نظر اس کے کہ یہ AWS پر چل رہا ہے یا کسی اور پلیٹ فارم پر۔

مزید معلومات کے لیے رجوع کریں۔ Amazon Translate اور Amazon Augmented AI کے ساتھ انسانی جائزے کے ورک فلو کو ڈیزائن کرنا پوسٹ

مندرجہ ذیل خاکہ حل کے کمانڈ فلو اور ڈیٹا کے بہاؤ کو دکھاتا ہے۔ کمانڈ فلو ورک فلو میں واقعات کی منطقی ترتیب کو ظاہر کرتا ہے۔ ڈیٹا کا بہاؤ اس بات کی نشاندہی کرتا ہے کہ حل میں مختلف اجزاء کے ذریعہ ڈیٹا کیسے بنایا یا استعمال کیا جا رہا ہے۔

درج ذیل ترتیب کا خاکہ حل میں دو الگ الگ عمل دکھاتا ہے: ترجمہ ورک فلو (A) اور متوازی ڈیٹا (B) کو اپ ڈیٹ کرنے کا عمل۔

ترجمہ ورک فلو ایک کے ذریعہ شروع کیا جاتا ہے۔ ایمیزون کلاؤڈ واچ طے شدہ واقعہ جو ترجمہ جاب انووکر کو شروع کرتا ہے۔ او ڈبلیو ایس لامبڈا۔ فنکشن یہ فنکشن Amazon Translate میں ایک متضاد ترجمے کا کام تخلیق کرتا ہے، ترجمہ کرنے کے لیے دستاویز کے ساتھ گزرتا ہے اور ترجمہ کو حسب ضرورت بنانے کے لیے متوازی ڈیٹا کا مقام۔ ترجمہ کا کام متوازی ڈیٹا کو پڑھتا ہے، ترجمہ انجام دیتا ہے، اور ترجمہ شدہ نتیجہ کو واپس لکھتا ہے۔ ایمیزون S3 بالٹی. اس تحریر کے مطابق، صرف متضاد ترجمے والی ملازمتیں متوازی ڈیٹا استعمال کر سکتی ہیں۔

جب ترجمے کا کام مکمل ہو جاتا ہے، تو ایک ایسا واقعہ تیار ہوتا ہے جو ٹرانسلیشن جاب کمپلیشن ہینڈلر لیمبڈا فنکشن کو متحرک کرتا ہے۔ یہ فنکشن انسانی ورک فلو لوپ بناتا ہے — جو ورک فلو کے Amazon A2I حصے کا اہم جزو ہے۔

انسانی جائزہ لینے والے ترجمے کا جائزہ لیتے ہیں اور ترجمے کو قبول یا اس میں ترمیم کرتے ہیں۔ کسی بھی تصحیح کا استعمال ترجمہ شدہ دستاویز کو اپ ڈیٹ کرنے کے لیے کیا جاتا ہے اور اسے حسب ضرورت لغت میں بھی شامل کیا جاتا ہے۔ جب جائزہ کو حتمی شکل دی جاتی ہے، تو ورک فلو تکمیل ہینڈلر فنکشن کو متحرک کرنے کے لیے ایک اور ایونٹ تیار کیا جاتا ہے۔ یہ فنکشن تازہ ترین ترجمہ شدہ دستاویز واپس ایمیزون S3 پر لکھتا ہے۔ حسب ضرورت ڈیٹا کو اپ ڈیٹ کرنے کے لیے استعمال کیا جاتا ہے۔ ایمیزون ڈائنومو ڈی بی ذریعہ اور ترجمہ شدہ متن کے جوڑوں کے ساتھ ٹیبل۔

لوپ کو بند کرنے کے لیے، ہمیں DynamoDB میں ذخیرہ کردہ اس حسب ضرورت ڈیٹا کو Amazon S3 میں ذخیرہ کردہ متوازی ڈیٹا میں شامل کرنا چاہیے۔ اس کو پورا کرنے کے لیے، ہم متوازی ڈیٹا ریفریشر فنکشن کو متحرک کرنے کے لیے ایک طے شدہ CloudWatch ایونٹ کا استعمال کرتے ہیں، جو DynamoDB ٹیبل سے ڈیٹا کو پڑھتا ہے، اسے متوازی ڈیٹا کے طور پر دوبارہ فارمیٹ کرتا ہے، اور متوازی ڈیٹا کو اسٹور کرتے ہوئے S3 بالٹی کو اپ ڈیٹ کرتا ہے۔

AWS CloudFormation کے ساتھ حل تعینات کریں۔

فراہم کردہ لانچ کریں۔ AWS کلاؤڈ فارمیشن آپ کے اکاؤنٹ میں حل کو تعینات کرنے کے لیے ٹیمپلیٹ۔ یہ اسٹیک صرف US-east-1 ریجن میں کام کرتا ہے۔ اگر آپ اس حل کو دوسرے خطوں میں تعینات کرنا چاہتے ہیں تو درج ذیل سے رجوع کریں۔ GitHub repo.

1. میں سے انتخاب کریں اسٹیک لانچ کریں۔:
   
2. ضروری پیرامیٹرز کو آباد کرنے کے لیے ہدایات پر عمل کریں۔ اگر آپ اس اسٹیک کو پہلی بار چلا رہے ہیں، SNS ای میل صرف مطلوبہ پیرامیٹر ہے۔
3. پر کا جائزہ لیں صفحہ، میں صلاحیتوں سیکشن، چیک باکس کو منتخب کریں اور منتخب کریں اسٹیک بنائیں.

اسٹیک مندرجہ ذیل کلیدی اجزاء کو تخلیق کرتا ہے:

• حسب ضرورت ڈیٹا - ایک DynamoDB ٹیبل (translate_parallel_data) حسب ضرورت ڈیٹا کو برقرار رکھنے کے لیے۔ آپ موجودہ حسب ضرورت ڈیٹا کو اس ٹیبل میں منتقل کرتے ہیں۔ اس جدول کو حسب ضرورت شامل کرنے اور اپ ڈیٹ کرنے کے لیے استعمال کیا جاتا ہے۔
• متوازی ڈیٹا ریفریشر - DynamoDB ٹیبل میں حسب ضرورت ڈیٹا کو متوازی ڈیٹا فارمیٹ—CSV، TSV، یا TMX—میں تبدیل کرنے اور اسے Amazon S3 میں اسٹور کرنے کے لیے Lambda فنکشن۔ یہ ایمیزون S3 میں نئی ​​متوازی ڈیٹا فائل کے ساتھ متوازی ڈیٹا بناتا اور اپ ڈیٹ کرتا ہے۔
• ترجمہ جاب انووکر - متوازی ڈیٹا کے ساتھ ایمیزون ٹرانسلیٹ بیچ جاب شروع کرنے کے لیے لیمبڈا فنکشن۔
• ترجمہ ملازمت کی تکمیل کا ہینڈلر - یہ لیمبڈا فنکشن اس وقت متحرک ہوتا ہے جب Amazon Translate بیچ کا کام مکمل ہوجاتا ہے۔ فنکشن فی دستاویز ایک ہیومن لوپ بناتا ہے (ہم مستقبل میں اس کو بہتر کریں گے تاکہ عمل شدہ دستاویزات کے منتخب فیصد کے لیے ہیومن لوپ بنایا جا سکے)۔ یہ انسانی لوپ بنانے کے لیے اصل اور ترجمہ شدہ دستاویزات کا استعمال کرتا ہے۔
• ایمیزون A2I اپنی مرضی کے مطابق ٹیمپلیٹ - یہ ٹیمپلیٹ انسانی جائزے کے لیے ترجمہ کے جوڑے کو پیش کرنے کے لیے استعمال کیا جاتا ہے۔ ٹیمپلیٹ میں ہے۔ شامل کریں ترجمہ کے ہر حصے کے لیے آپشن۔ صارفین حسب ضرورت ڈیٹا میں اصلاحات شامل کرنے کے لیے اس اختیار کو منتخب کر سکتے ہیں۔ نیا حسب ضرورت ڈیٹا اگلے بیچ کے ترجمے کے کام میں استعمال ہوتا ہے۔
• ورک فلو کی تکمیل کا ہینڈلر - یہ لیمبڈا فنکشن اس وقت متحرک ہوتا ہے جب انسانی ورک فلو مکمل ہوجاتا ہے۔ فنکشن ترجمہ شدہ دستاویز کو تصحیح کے ساتھ اپ ڈیٹ کرتا ہے اور متوازی ڈیٹا اپ ڈیٹس کی جانچ کرتا ہے۔ نیا متوازی ڈیٹا DynamoDB ٹیبل میں شامل کیا گیا ہے۔
• ایمیزون A2I نجی ٹیم - فراہم کردہ ای میل کا استعمال کرتے ہوئے ایک انسانی کارکن کے ساتھ ایک Amazon A2I نجی ٹیم بنائی گئی ہے۔ پرائیویٹ ٹیم کی کامیاب تخلیق پر ابتدائی اسناد ای میل کی جاتی ہیں۔ آپ Amazon A2I ورکر پورٹل میں لاگ ان کرنے کے لیے اس ای میل اور اسناد کا استعمال کرتے ہیں۔

حل کی جانچ کریں۔

۔ sample_text.txt فائل اسٹیک کے ذریعہ تخلیق کردہ S3 بالٹی کے ان پٹ سابقہ ​​کے تحت بنائی گئی ہوگی۔ ہم اس فائل کو اپنی جانچ کے لیے استعمال کرتے ہیں۔ یہ مندرجہ ذیل مواد پر مشتمل ہے:

Life insurance companies have the freedom to charge different premiums based on risk
factors that predict mortality. Purchasing a life insurance policy often entails a health 
status check or medical exam, and asking for vaccination status is not banned.

Health insurers are a different story. A slew of state and federal regulations in the 
last three decades have heavily restricted their ability to use health factors in issuing 
or pricing polices. The use of health status in any group health insurance policy is 
prohibited by law. The Affordable Care Act, passed in 2014, prevents insurers from pricing 
plans according to health – with one exception: smoking status.

حل کی جانچ کرنے کے لیے، درج ذیل مراحل کو مکمل کریں:

1. ٹرانسلیشن جاب انوکر فنکشن کو دستی طور پر شروع کریں، یا آپ کے بتائے ہوئے کرون شیڈول کی بنیاد پر کلاؤڈ واچ کے ذریعہ اس کے متحرک ہونے کا انتظار کریں۔
   یہ فنکشن ایمیزون ٹرانسلیٹ بیچ جاب کو متحرک کرتا ہے۔ آپ Amazon Translate کنسول پر جاب کی پیشرفت کا مشاہدہ کر سکتے ہیں۔
   اس بیچ کے کام کو مکمل ہونے میں تقریباً 30 منٹ لگتے ہیں۔ جب یہ مکمل ہو جائے تو TextTranslationJob اسٹیٹ چینج ایونٹ ٹرانسلیشن جاب کمپلیشن ہینڈلر فنکشن کو متحرک کرتا ہے۔ یہ فنکشن ہر ترجمہ شدہ دستاویز میں ایک انسانی لوپ بناتا ہے۔
2. پر تشریف لے جائیں ایمیزون A2I افرادی قوت صفحہ.
3. منتخب کیجئیے ذاتی ٹیب.
   
4. کے لیے لنک کا انتخاب کرکے Amazon A2I ورکر پورٹل میں لاگ ان کریں۔ پورٹل سائن ان URL کو لیبل لگانا.
5. کام کو منتخب کریں۔ Human review task ملازمتوں کی فہرست میں۔
6. میں سے انتخاب کریں کام شروع کرو.
   
   آپ مندرجہ ذیل صفحہ کو ظاہر کر سکتے ہیں۔
   
7. ڈومین اور زبان سے متعلق تصحیح کرنے کے لیے ہدایات پر عمل کریں۔
   پچھلے اسکرین شاٹ میں، جملہ "کسی بھی گروپ ہیلتھ انشورنس پالیسی میں صحت کی حیثیت کا استعمال قانون کے ذریعہ ممنوع ہے" کا ترجمہ "La ley prohíbe el uso del estado de salud en cualquier póliza de seguro médico de grupo" میں کیا گیا ہے۔ اگرچہ ترجمہ درست ہے، لیکن جملے دوبارہ ترتیب دیئے گئے ہیں۔
8. آئیے اس میں ترمیم کرتے ہیں "El uso del estado de salud en cualquier póliza de seguro de salud grupal está prohibido por ley" تاکہ یہ اصل محاورات کی عکاسی کرنے والا مزید براہ راست ترجمہ ہو۔
9. منتخب کریں شامل کریں اسے لغت میں شامل کرنے کے لیے۔
10. جب آپ کام کر لیں، منتخب کریں۔ جمع کرائیں.
    

یہ ورک فلو کمپلیشن ہینڈلر فنکشن کو متحرک کرتا ہے، اور کسٹمائزیشن ڈیٹا کو DynamoDB ٹیبل میں اپ ڈیٹ کیا جاتا ہے۔ فنکشن ترمیم کے بعد کے سابقہ ​​کے تحت درست ترجمہ کو بھی ذخیرہ کرتا ہے۔

آپ اس میں شامل کیے جانے والے تخصیصات کا مشاہدہ کر سکتے ہیں۔ translate_parallel_data DynamoDB کنسول پر ٹیبل۔

کمانڈ کا بہاؤ

متوازی ڈیٹا ریفریشر فنکشن ہر گھنٹے CloudWatch کے طے شدہ ایونٹ کے ذریعے متحرک ہوتا ہے۔ یہ فنکشن میں نئی ​​اپ ڈیٹس کی جانچ کرتا ہے۔ translate_parallel_data ٹیبل کے تحت ایمیزون S3 میں ایک نئی متوازی ڈیٹا TMX فائل بناتا ہے۔ parallel_data سابقہ، اور Amazon Translate متوازی ڈیٹا جزو کو اپ ڈیٹ کرتا ہے۔ اگر آپ طے شدہ ایونٹ ٹرگر کا انتظار نہیں کرنا چاہتے ہیں تو آپ اس فنکشن کو دستی طور پر ٹرگر کر سکتے ہیں۔

آپ ایمیزون ٹرانسلیٹ کنسول پر اپ ڈیٹ ہونے والے متوازی ڈیٹا کا مشاہدہ کر سکتے ہیں۔

جب یہ مکمل ہو جائے تو نوکری کی حیثیت ہونی چاہیے۔ ایکٹو اور قیمت کے لئے تازہ کاری شدہ ریکارڈ آپ کے شامل کردہ تخصیصات کی تعداد کو ظاہر کرنا چاہیے (اس صورت میں 1)۔

اب ہم تازہ کاری شدہ ڈیٹا کے ساتھ دوبارہ ترجمہ کا کام چلا سکتے ہیں۔ دوسری تکرار میں ترجمے میں شامل کیے جانے والے حسب ضرورت کو دیکھنے کے لیے Translation Job Invoker فنکشن کو دوبارہ متحرک کریں۔ Amazon Translate اب ترجمہ کو حسب ضرورت بنانے کے لیے فراہم کردہ متوازی ڈیٹا کا استعمال کرتا ہے۔

آپ لیبلنگ پورٹل میں ترجمہ آؤٹ پٹ میں تبدیلی دیکھ سکتے ہیں۔ پہلے سے طے شدہ ترجمہ کے بجائے، ہم اپنی مرضی کے مطابق ترجمہ کو لاگو ہوتے دیکھتے ہیں۔

یہ ورک فلو Amazon A2I اور Amazon Translate حسب ضرورت فیچرز کا استعمال کرتے ہوئے ترجمے کی پیداوار کو مسلسل بہتر بنانے کے لیے ایک نیک سائیکل بنانے میں مدد کرتا ہے۔

قیمت

Amazon Translate اور Amazon A2I کے ساتھ، آپ ادائیگی کرتے وقت ٹیکسٹ کریکٹرز کی تعداد کی بنیاد پر کرتے ہیں جن پر آپ نے کارروائی کی ہے اور ہر انسان کے ذریعے نظرثانی شدہ آبجیکٹ کے لیے۔ ہم اس مثال کے لیے DynamoDB آن ڈیمانڈ موڈ استعمال کرتے ہیں۔ DynamoDB آپ کے ٹیبل پر کیے گئے پڑھنے اور لکھنے کے لیے آپ سے معاوضہ لیتا ہے۔ کے لیے قیمتوں کے صفحات کا حوالہ دیں۔ ایمیزون ترجمہ, ایمیزون A2I، اور ایمیزون ڈائنومو ڈی بی اصل اخراجات کے لیے۔

صاف کرو

جب آپ اس حل کے ساتھ تجربہ مکمل کر لیں تو، اس مثال میں تعینات تمام وسائل کو حذف کرنے کے لیے AWS CloudFormation کنسول کا استعمال کر کے اپنے وسائل کو صاف کریں۔ اس سے آپ کو اپنے اکاؤنٹ میں لاگت جاری رکھنے سے بچنے میں مدد ملتی ہے۔

نتیجہ

آپ اس پوسٹ میں پیش کردہ حل کو ایک کثیر لسانی ترجمے کا ورک فلو بنانے کے لیے استعمال کر سکتے ہیں جو ترجمے کے نتائج کو مسلسل بہتر بنانے کے لیے ڈومین کے لیے مخصوص حسب ضرورت کو بتدریج استعمال اور بڑھاتا ہے۔ ہم نے آپ کے موجودہ حسب ضرورت اثاثوں کو منظم AI سروسز جیسے Amazon Translate اور Amazon A2I کے ساتھ مربوط کرنے کے لیے ایک سادہ طریقہ کار فراہم کیا ہے تاکہ آپ کی درخواست کے لیے ایک مضبوط ترجمے کی خدمت تیار کی جا سکے۔ Amazon Translate آپ کو 5,550 سے زیادہ ترجمے کے جوڑوں کو باکس کے باہر سپورٹ کرنے کے لیے اس حل کو پیمانہ کرنے میں مدد کر سکتا ہے۔ Amazon A2I آپ کو اپنے اندرون ملک لسانی ماہر کے ساتھ آسانی سے ضم ہونے میں مدد کر سکتا ہے یا حل کی پیمائش کرنے کے لیے بیرونی افرادی قوت سے فائدہ اٹھا سکتا ہے۔

Amazon Translate کے بارے میں مزید معلومات کے لیے ملاحظہ کریں۔ ایمیزون ترجمہ وسائل ویڈیو وسائل اور بلاگ پوسٹس تلاش کرنے کے لیے، اور رجوع کریں۔ AWS Translate FAQs. براہ کرم تبصرے کے سیکشن میں یا پروجیکٹ کے ایشوز سیکشن میں اپنے خیالات ہمارے ساتھ شیئر کریں۔ گیتوب ذخیرہ.

مصنفین کے بارے میں

ستھیا بالکرشنن AWS میں پروفیشنل سروسز ٹیم میں Sr کسٹمر ڈیلیوری آرکیٹیکٹ ہے، جو ڈیٹا/ML سلوشنز میں مہارت رکھتا ہے۔ وہ امریکی وفاقی مالیاتی گاہکوں کے ساتھ کام کرتا ہے۔ وہ صارفین کے کاروباری مسائل کو حل کرنے کے لیے عملی حل تیار کرنے کا پرجوش ہے۔ اپنے فارغ وقت میں، وہ اپنے خاندان کے ساتھ فلمیں دیکھنے اور پیدل سفر کرنے سے لطف اندوز ہوتے ہیں۔

پال ڈبلیو جوئیرمین AWS میں پیشہ ورانہ خدمات میں ایک سینئر کسٹمر ڈیلیوری آرکیٹیکٹ ہے، جو ایپلیکیشن مائیگریشن میں مہارت رکھتا ہے اور امریکی وفاقی مالیاتی کلائنٹس کے ساتھ کام کرتا ہے۔ پال کو ٹیکنالوجی کے حل تیار کرنے، فیملی کے ساتھ سفر کرنے اور شینانڈوہ نیشنل پارک میں پیدل سفر کرنے کا لطف آتا ہے، جب تک کہ یہ ہائیک مقامی کرافٹ بریوری میں ختم ہو جائے۔