آمازون SageMaker یک پلتفرم یادگیری ماشینی (ML) کاملاً مدیریت شده است که مجموعه ای جامع از خدمات را ارائه می دهد که بارهای کاری ML سرتاسر را ارائه می دهد. مانند توسط AWS به عنوان بهترین عمل توصیه شده است، مشتریان از حساب های جداگانه برای ساده سازی مدیریت خط مشی برای کاربران و جداسازی منابع بر اساس حجم کاری و حساب استفاده کرده اند. با این حال، زمانی که کاربران و تیمهای بیشتری از پلتفرم ML در فضای ابری استفاده میکنند، نظارت بر حجم کاری بزرگ ML در یک محیط چند حسابی مقیاسپذیر چالشبرانگیزتر میشود. برای مشاهده بهتر، مشتریان به دنبال راهحلهایی برای نظارت بر استفاده از منابع بین حسابها و پیگیری فعالیتها، مانند راهاندازی کار و وضعیت اجرا هستند، که برای حاکمیت و الزامات مدیریت ML آنها ضروری است.
سرویسهای SageMaker، مانند پردازش، آموزش و میزبانی، معیارها و گزارشها را از نمونههای در حال اجرا جمعآوری میکنند و آنها را به کاربران منتقل میکنند. CloudWatch آمازون حساب ها. برای مشاهده جزئیات این مشاغل در حساب های مختلف، باید به هر حساب وارد شوید، مشاغل مربوطه را بیابید و وضعیت را بررسی کنید. هیچ شیشه ای وجود ندارد که بتواند به راحتی این اطلاعات متقاطع و چند کار را نشان دهد. علاوه بر این، تیم مدیریت ابر باید دسترسی افراد را به حسابهای بار کاری مختلف SageMaker فراهم کند که هزینههای مدیریتی بیشتری را برای تیم پلتفرم ابری اضافه میکند.
در این پست، ما یک داشبورد قابلیت مشاهده بین حسابها را ارائه میکنیم که نمای متمرکزی را برای نظارت بر فعالیتها و منابع کاربر SageMaker در چندین حساب ارائه میدهد. این به کاربران نهایی و تیم مدیریت ابری اجازه میدهد تا به طور موثر بر حجمهای کاری ML در حال اجرا نظارت کنند، وضعیت این بارهای کاری را مشاهده کنند و فعالیتهای حسابهای مختلف را در مقاطع زمانی خاص ردیابی کنند. با استفاده از این داشبورد، نیازی نیست از کنسول SageMaker پیمایش کنید و روی هر کار کلیک کنید تا جزئیات گزارش کار را بیابید. درعوض، می توانید به راحتی مشاغل در حال اجرا و وضعیت شغلی را مشاهده کنید، مشکلات شغلی را عیب یابی کنید، و هشدارهایی را در صورت شناسایی مشکلات در حساب های مشترک، مانند شکست شغلی، منابع کم استفاده و موارد دیگر، تنظیم کنید. همچنین میتوانید دسترسی به این داشبورد نظارت متمرکز را کنترل کنید یا داشبورد را با مقامات مربوطه برای نیازهای حسابرسی و مدیریت به اشتراک بگذارید.
بررسی اجمالی راه حل
این راه حل برای فعال کردن نظارت متمرکز بر مشاغل و فعالیت های SageMaker در یک محیط چند حساب طراحی شده است. راه حل به گونه ای طراحی شده است که هیچ وابستگی به آن نداشته باشد سازمانهای AWS، اما می تواند به راحتی در یک سازمان یا برج کنترل AWS محیط. این راه حل می تواند به تیم عملیات کمک کند تا دیدی سطح بالا از تمام بارهای کاری SageMaker که در چندین حساب حجم کاری پخش شده اند از یک شیشه واحد داشته باشند. همچنین گزینه ای برای فعال کردن دارد قابلیت مشاهده بین حساب های CloudWatch در سراسر حسابهای حجم کاری SageMaker برای دسترسی به تلهمتریهای نظارتی مانند متریکها، گزارشها و ردیابیها از حساب نظارت متمرکز. نمونه داشبورد در تصویر زیر نشان داده شده است.
نمودار زیر معماری این راه حل متمرکز داشبورد را نشان می دهد.
SageMaker دارای ادغام بومی با پل رویداد آمازون، که رویدادهای تغییر وضعیت را در SageMaker نظارت می کند. EventBridge شما را قادر می سازد SageMaker را خودکار کنید و به رویدادهایی مانند تغییر وضعیت شغلی آموزشی یا تغییر وضعیت نقطه پایانی به طور خودکار پاسخ دهید. رویدادهای SageMaker تقریباً در زمان واقعی به EventBridge تحویل داده می شوند. برای اطلاعات بیشتر در مورد رویدادهای SageMaker که توسط EventBridge نظارت میشوند، مراجعه کنید خودکارسازی Amazon SageMaker با Amazon EventBridge. علاوه بر رویدادهای بومی SageMaker، AWS CloudTrail هنگام برقراری تماسهای API، رویدادها را منتشر میکند، که به EventBridge نیز پخش میشود تا بتوان از آن برای بسیاری از موارد استفاده از اتوماسیون پاییندست یا نظارت استفاده کرد. در راه حل خود، ما از قوانین EventBridge در حساب های حجم کاری برای پخش جریانی رویدادهای سرویس SageMaker و رویدادهای API به گذرگاه رویداد حساب نظارت برای نظارت متمرکز استفاده می کنیم.
در حساب نظارت متمرکز، رویدادها توسط یک قانون EventBridge ثبت میشوند و بیشتر در اهداف مختلف پردازش میشوند:
- یک گروه گزارش CloudWatch، برای استفاده برای موارد زیر:
- اهداف حسابرسی و آرشیو. برای اطلاعات بیشتر به راهنمای کاربر گزارش های آمازون CloudWatch.
- تجزیه و تحلیل داده های ورود به سیستم با CloudWatch Log Insights پرس و جوها CloudWatch Logs Insights شما را قادر می سازد تا به صورت تعاملی داده های گزارش خود را در CloudWatch Logs جستجو و تجزیه و تحلیل کنید. شما می توانید پرس و جوهایی را انجام دهید تا به شما کمک کند به طور موثرتر و موثرتر به مسائل عملیاتی پاسخ دهید. اگر مشکلی پیش آمد، میتوانید از CloudWatch Logs Insights برای شناسایی علل بالقوه و اعتبارسنجی رفعهای مستقر استفاده کنید.
- پشتیبانی از ویجت پرس و جوی CloudWatch Metrics Insights برای عملیات سطح بالا در داشبورد CloudWatch، افزودن CloudWatch Insights Query به داشبوردها، و صادرات نتایج جستجو.
- An AWS لامبدا عملکرد برای تکمیل وظایف زیر:
- منطق سفارشی را برای افزایش رویدادهای خدمات SageMaker انجام دهید. یک مثال انجام یک پرس و جو متریک در معیارهای استفاده میزبان شغلی SageMaker هنگام دریافت رویداد تکمیل کار است.
- تبدیل اطلاعات رویداد به معیارها در قالبهای گزارش خاص به محض دریافت EMF سیاهههای مربوط برای اطلاعات بیشتر مراجعه کنید تعبیه معیارها در لاگ ها.
مثال در این پست توسط بومی پشتیبانی می شود قابلیت مشاهده بین حساب های CloudWatch ویژگی برای دستیابی به معیارهای بین حسابها، گزارشها و دسترسی به ردیابی. همانطور که در پایین نمودار معماری نشان داده شده است، با این ویژگی ادغام می شود تا معیارهای بین حساب ها و گزارش ها را فعال کند. برای فعال کردن این کار، مجوزها و منابع لازم باید هم در حسابهای نظارت و هم در حسابهای حجم کار منبع ایجاد شوند.
می توانید از این راه حل برای حساب های AWS که توسط سازمان ها مدیریت می شوند یا برای حساب های مستقل استفاده کنید. بخش های زیر مراحل هر سناریو را توضیح می دهد. توجه داشته باشید که در هر سناریو، مراحل در حساب های مختلف AWS انجام می شود. برای راحتی شما، نوع حساب برای انجام مرحله در ابتدای هر مرحله برجسته شده است.
پیش نیازها
قبل از شروع این رویه، کد منبع خود را از قسمت کلون کنید GitHub repo در محیط محلی شما یا AWS Cloud9. علاوه بر این، به موارد زیر نیاز دارید:
راه حل را در محیط سازمانی مستقر کنید
اگر حساب مانیتورینگ و همه حسابهای بار کاری SageMaker همه در یک سازمان باشند، زیرساخت مورد نیاز در حسابهای حجم کار منبع به طور خودکار از طریق یک AWS CloudFormation StackSet از حساب مدیریت سازمان. بنابراین، نیازی به استقرار دستی زیرساخت در حسابهای حجم کاری منبع نیست. هنگامی که یک حساب جدید ایجاد می شود یا یک حساب موجود به یک واحد سازمانی هدف (OU) منتقل می شود، پشته زیرساخت حجم کار منبع به طور خودکار مستقر می شود و در محدوده نظارت متمرکز گنجانده می شود.
منابع حساب نظارتی را تنظیم کنید
ما باید اطلاعات حساب AWS زیر را جمع آوری کنیم تا منابع حساب نظارتی را تنظیم کنیم که بعداً از آنها به عنوان ورودی اسکریپت راه اندازی استفاده می کنیم.
ورودی | توضیحات: | مثال |
منطقه اصلی | منطقه ای که بارهای کاری در آن اجرا می شود. | ap-southeast-2 |
نام نمایه AWS CLI حساب پایش | می توانید نام پروفایل را از اینجا پیدا کنید ~/.aws/config . این اختیاری است. اگر ارائه نشود، از اعتبارنامه پیش فرض AWS از زنجیره استفاده می کند. |
. |
مسیر OU حجم کاری SageMaker | مسیر OU که دارای حساب های حجم کاری SageMaker است. نگه دارید / در انتهای مسیر |
o-1a2b3c4d5e/r-saaa/ou-saaa-1a2b3c4d/ |
برای بازیابی مسیر OU، میتوانید به کنسول سازمانها و در زیر بروید حساب های AWS، اطلاعاتی را برای ساخت مسیر OU پیدا کنید. برای مثال زیر، مسیر OU مربوطه است o-ye3wn3kyh6/r-taql/ou-taql-wu7296by/
.
پس از بازیابی این اطلاعات، دستور زیر را برای استقرار منابع مورد نیاز در حساب مانیتورینگ اجرا کنید:
شما می توانید خروجی های زیر را از استقرار دریافت کنید. هنگام استقرار پشته حساب مدیریتی، خروجی ها را یادداشت کنید تا در مرحله بعدی از آنها استفاده کنید.
تنظیم منابع حساب مدیریت
ما باید اطلاعات حساب AWS زیر را جمع آوری کنیم تا منابع حساب مدیریتی را تنظیم کنیم که بعداً از آنها به عنوان ورودی اسکریپت راه اندازی استفاده می کنیم.
ورودی | توضیحات: | مثال |
منطقه اصلی | منطقه ای که بارهای کاری در آن اجرا می شود. این باید مانند پشته نظارت باشد. | ap-southeast-2 |
نام نمایه حساب مدیریتی AWS CLI | می توانید نام پروفایل را از اینجا پیدا کنید ~/.aws/config . این اختیاری است. اگر ارائه نشود، از اعتبارنامه پیش فرض AWS از زنجیره استفاده می کند. |
. |
SageMaker حجم کار OU ID | در اینجا ما فقط از شناسه OU استفاده می کنیم، نه از مسیر. | ou-saaa-1a2b3c4d |
شناسه حساب نظارت | شناسه حسابی که پشته نظارت در آن مستقر شده است. | . |
نام نقش حساب نظارت | خروجی برای MonitoringAccountRoleName از مرحله قبل |
. |
نظارت بر گذرگاه رویداد حساب ARN | خروجی برای MonitoringAccountEventbusARN از مرحله قبل |
. |
مانیتورینگ شناسه سینک حساب | خروجی از MonitoringAccountSinkIdentifier از مرحله قبل |
. |
با اجرای دستور زیر می توانید منابع حساب مدیریت را مستقر کنید:
راه حل را در محیط غیر سازمانی مستقر کنید
اگر محیط شما از سازمانها استفاده نمیکند، پشته زیرساخت حساب مانیتورینگ به روشی مشابه اما با کمی تغییرات مستقر میشود. با این حال، پشته زیرساخت بار کاری باید به صورت دستی در هر حساب حجم کاری مستقر شود. بنابراین این روش برای محیطی با تعداد اکانت محدود مناسب است. برای یک محیط بزرگ، توصیه می شود از سازمان ها استفاده کنید.
منابع حساب نظارتی را تنظیم کنید
ما باید اطلاعات حساب AWS زیر را جمع آوری کنیم تا منابع حساب نظارتی را تنظیم کنیم که بعداً از آنها به عنوان ورودی اسکریپت راه اندازی استفاده می کنیم.
ورودی | توضیحات: | مثال |
منطقه اصلی | منطقه ای که بارهای کاری در آن اجرا می شود. | ap-southeast-2 |
لیست حساب حجم کاری SageMaker | فهرستی از حسابهایی که حجم کار SageMaker را اجرا میکنند و رویدادها را به حساب نظارت پخش میکنند که با کاما از هم جدا شدهاند. | 111111111111,222222222222 |
نام نمایه AWS CLI حساب پایش | می توانید نام پروفایل را از اینجا پیدا کنید ~/.aws/config . این اختیاری است. اگر ارائه نشود، از اعتبارنامه پیش فرض AWS از زنجیره استفاده می کند. |
. |
پس از جمعآوری اطلاعات لازم، میتوانیم منابع حساب نظارت را با اجرای دستور زیر مستقر کنیم:
پس از تکمیل استقرار، خروجی های زیر را دریافت می کنیم. هنگام استقرار پشته حساب مدیریتی، خروجی ها را یادداشت کنید تا در مرحله بعدی از آنها استفاده کنید.
زیرساخت نظارت بر حساب حجم کاری را تنظیم کنید
ما باید اطلاعات حساب AWS زیر را جمع آوری کنیم تا زیرساخت نظارت حساب حجم کاری را تنظیم کنیم، که بعداً از آن به عنوان ورودی اسکریپت راه اندازی استفاده می کنیم.
ورودی | توضیحات: | مثال |
منطقه اصلی | منطقه ای که بارهای کاری در آن اجرا می شود. این باید مانند پشته نظارت باشد. | ap-southeast-2 |
شناسه حساب نظارت | شناسه حسابی که پشته نظارت در آن مستقر شده است. | . |
نام نقش حساب نظارت | خروجی برای MonitoringAccountRoleName از مرحله قبل |
. |
نظارت بر گذرگاه رویداد حساب ARN | خروجی برای MonitoringAccountEventbusARN از مرحله قبل |
. |
مانیتورینگ شناسه سینک حساب | خروجی از MonitoringAccountSinkIdentifier از مرحله قبل |
. |
نام نمایه حساب بار کاری AWS CLI | می توانید نام پروفایل را از اینجا پیدا کنید ~/.aws/config . این اختیاری است. اگر ارائه نشود، از اعتبارنامه پیش فرض AWS از زنجیره استفاده می کند. |
. |
ما می توانیم منابع حساب نظارت را با اجرای دستور زیر مستقر کنیم:
وظایف ML را در داشبورد CloudWatch تجسم کنید
برای بررسی اینکه آیا راه حل کار می کند، باید چندین کار پردازش SageMaker و کارهای آموزشی SageMaker را در حساب های حجم کاری که در بخش های قبلی استفاده کردیم اجرا کنیم. داشبورد CloudWatch بر اساس سناریوهای شخصی شما قابل تنظیم است. داشبورد نمونه ما شامل ویجت هایی برای تجسم کارهای پردازش SageMaker و مشاغل آموزش SageMaker است. تمام کارهای مربوط به نظارت بر حساب های حجم کاری در این داشبورد نمایش داده می شود. در هر نوع کار، ما سه ویجت را نشان می دهیم که عبارتند از تعداد کل مشاغل، تعداد کارهای ناموفق و جزئیات هر کار. در مثال ما دو حساب حجم کاری داریم. از طریق این داشبورد، به راحتی میتوانیم دریابیم که یک حساب حجم کاری هم کار پردازشی و هم شغل آموزشی دارد و یک حساب حجم کاری دیگر فقط مشاغل آموزشی دارد. همانند توابعی که در CloudWatch استفاده میکنیم، میتوانیم فاصله بازخوانی را تنظیم کنیم، نوع نمودار را مشخص کنیم، بزرگنمایی یا کوچکنمایی کنیم، یا میتوانیم اقداماتی مانند گزارشهای دانلود را در یک فایل CSV اجرا کنیم.
داشبورد خود را سفارشی کنید
راه حل ارائه شده در مخزن GitHub شامل کار آموزش SageMaker و نظارت بر کار SageMaker Processing است. اگر میخواهید داشبوردهای بیشتری برای نظارت بر سایر کارهای SageMaker، مانند کارهای تبدیل دستهای، اضافه کنید، میتوانید دستورالعملهای این بخش را دنبال کنید تا داشبورد خود را سفارشی کنید. با اصلاح فایل index.py، می توانید فیلدهایی را که می خواهید روی داشبورد نمایش دهید سفارشی کنید. می توانید از طریق EventBridge به تمام جزئیاتی که توسط CloudWatch گرفته می شود دسترسی داشته باشید. در تابع Lambda، می توانید فیلدهای لازم را که می خواهید روی داشبورد نمایش دهید، انتخاب کنید. کد زیر را ببینید:
برای سفارشی کردن داشبورد یا ویجتها، میتوانید کد منبع را تغییر دهید فایل monitoring-account-infra-stack.ts. توجه داشته باشید که نام فیلدهایی که در این فایل استفاده می کنید باید با آن (کلیدهای job_detail
) در فایل Lambda تعریف شده است:
بعد از اینکه داشبورد را اصلاح کردید، باید این راه حل را از ابتدا مجدداً مستقر کنید. میتوانید نوتبوک Jupyter ارائهشده در مخزن GitHub را برای اجرای مجدد خط لوله SageMaker اجرا کنید، که کارهای پردازش SageMaker را دوباره راهاندازی میکند. وقتی کارها تمام شد، می توانید به کنسول CloudWatch و زیر بروید داشبورد در قسمت ناوبری، را انتخاب کنید داشبوردهای سفارشی. می توانید داشبوردی با نام SageMaker-Monitoring-Dashboard را پیدا کنید.
پاک کردن
اگر دیگر به این داشبورد سفارشی نیاز ندارید، می توانید منابع را پاکسازی کنید. برای حذف تمامی منابع ایجاد شده از کد موجود در این قسمت استفاده کنید. پاکسازی برای یک محیط سازمانی در مقابل یک محیط غیر سازمانی کمی متفاوت است.
برای محیط سازمانی از کد زیر استفاده کنید:
برای محیط غیر سازمانی، از کد زیر استفاده کنید:
از طرف دیگر، می توانید به حساب نظارت، حساب حجم کاری و حساب مدیریت وارد شوید پشته ها را از کنسول CloudFormation حذف کنید.
نتیجه
در این پست، ما در مورد پیاده سازی یک راه حل نظارت و گزارش متمرکز برای SageMaker با استفاده از CloudWatch بحث کردیم. با پیروی از دستورالعمل های گام به گام ذکر شده در این پست، می توانید یک داشبورد نظارت چند حسابی ایجاد کنید که معیارهای کلیدی را نمایش می دهد و گزارش های مربوط به مشاغل مختلف SageMaker آنها را از حساب های مختلف در زمان واقعی یکپارچه می کند. با استفاده از این داشبورد نظارت متمرکز، میتوانید دید بهتری نسبت به فعالیتهای SageMaker در چندین حساب داشته باشید، مشکلات را سریعتر عیبیابی کنید و بر اساس دادههای زمان واقعی تصمیمگیری آگاهانه بگیرید. به طور کلی، پیاده سازی یک راه حل نظارت و گزارش متمرکز با استفاده از CloudWatch راهی کارآمد برای سازمان ها برای مدیریت زیرساخت ML مبتنی بر ابر و استفاده از منابع ارائه می دهد.
لطفاً راه حل را امتحان کنید و بازخورد خود را برای ما ارسال کنید انجمن AWS برای Amazon SageMaker، یا از طریق مخاطبین معمولی AWS شما.
برای کسب اطلاعات بیشتر در مورد قابلیت مشاهده بین حسابها، لطفاً به وبلاگ مراجعه کنید قابلیت مشاهده بین اکانت های CloudWatch آمازون
درباره نویسنده
جی دونگ یک معمار ابر AWS مستقر در سیدنی، استرالیا است. جی علاقه زیادی به اتوماسیون دارد و دوست دارد راه حل هایی برای کمک به مشتری برای بهبود بهره وری ایجاد کند. سیستم رویداد محور و چارچوب بدون سرور تخصص اوست. جی در زمان خودش دوست دارد روی ساخت خانه هوشمند کار کند و وسایل خانه هوشمند جدید را کشف کند.
ملانی لیدکترا، یک متخصص ارشد AI/ML TAM در AWS مستقر در سیدنی، استرالیا است. او به مشتریان سازمانی کمک می کند تا راه حل هایی را با استفاده از ابزارهای پیشرفته AI/ML در AWS بسازند و راهنمایی هایی را در مورد معماری و اجرای راه حل های ML با بهترین شیوه ها ارائه می دهد. او در اوقات فراغت خود عاشق کشف طبیعت و گذراندن وقت با خانواده و دوستان است.
گوردون وانگ، یک TAM متخصص ارشد AI/ML در AWS است. او از مشتریان استراتژیک با بهترین شیوه های AI/ML در بسیاری از صنایع پشتیبانی می کند. او علاقه زیادی به بینایی کامپیوتر، NLP، هوش مصنوعی مولد و MLO دارد. در اوقات فراغت خود عاشق دویدن و پیاده روی است.
- محتوای مبتنی بر SEO و توزیع روابط عمومی. امروز تقویت شوید.
- PlatoData.Network Vertical Generative Ai. به خودت قدرت بده دسترسی به اینجا.
- PlatoAiStream. هوش وب 3 دانش تقویت شده دسترسی به اینجا.
- PlatoESG. خودرو / خودروهای الکتریکی، کربن ، CleanTech، انرژی، محیط، خورشیدی، مدیریت پسماند دسترسی به اینجا.
- PlatoHealth. هوش بیوتکنولوژی و آزمایشات بالینی. دسترسی به اینجا.
- ChartPrime. بازی معاملاتی خود را با ChartPrime ارتقا دهید. دسترسی به اینجا.
- BlockOffsets. نوسازی مالکیت افست زیست محیطی. دسترسی به اینجا.
- منبع: https://aws.amazon.com/blogs/machine-learning/build-a-centralized-monitoring-and-reporting-solution-for-amazon-sagemaker-using-amazon-cloudwatch/
- : دارد
- :است
- :نه
- :جایی که
- $UP
- 100
- 11
- 12
- 17
- 24
- 7
- 8
- 9
- a
- درباره ما
- دسترسی
- حساب
- حساب ها
- رسیدن
- در میان
- اقدامات
- فعالیت ها
- اضافه کردن
- اضافه کردن
- اضافه
- اضافی
- علاوه بر این
- می افزاید:
- مدیر سایت
- به تصویب رسید
- پس از
- از نو
- در برابر
- AI
- AI / ML
- تصویر، موسیقی
- معرفی
- اجازه می دهد تا
- همچنین
- آمازون
- آمازون SageMaker
- آمازون خدمات وب
- an
- تحلیل
- و
- دیگر
- API
- معماری
- بایگانی
- هستند
- AS
- At
- حسابرسی
- استرالیا
- مقامات
- خودکار بودن
- بطور خودکار
- اتوماسیون
- AWS
- به عقب
- مستقر
- BE
- شود
- شروع
- بهترین
- بهترین شیوه
- بهتر
- بلاگ
- هر دو
- پایین
- ساختن
- بنا
- اتوبوس
- اما
- by
- تماس ها
- CAN
- می توانید دریافت کنید
- اسیر
- موارد
- علل
- متمرکز
- معین
- زنجیر
- به چالش کشیدن
- تغییر دادن
- تبادل
- بررسی
- را انتخاب کنید
- کلیک
- ابر
- بستر ابری
- رمز
- جمع آوری
- کامل
- اتمام
- جامع
- کامپیوتر
- چشم انداز کامپیوتر
- در نظر بگیرید
- تشکیل شده است
- کنسول
- ادغام می کند
- ساختن
- اطلاعات تماس
- زمینه
- کنترل
- راحتی
- متناظر
- ایجاد
- ایجاد شده
- مجوزها و اعتبارات
- صلیب
- سفارشی
- مشتری
- مشتریان
- سفارشی
- سفارشی
- داشبورد
- داشبورد
- داده ها
- تصمیم گیری
- به طور پیش فرض
- مشخص
- تحویل داده
- وابستگی
- گسترش
- مستقر
- استقرار
- گسترش
- طراحی
- جزئیات
- جزئیات
- توسعه
- مختلف
- بحث کردیم
- نمایش دادن
- نمایش داده
- صفحه نمایش
- نمی کند
- آیا
- دانلود
- مدت
- e
- هر
- به آسانی
- به طور موثر
- موثر
- موثر
- هر دو
- قادر ساختن
- را قادر می سازد
- پایان
- پشت سر هم
- نقطه پایانی
- سرمایه گذاری
- محیط
- ضروری است
- واقعه
- حوادث
- مثال
- جز
- اجرا کردن
- موجود
- تخصص
- توضیح دهید
- اکتشاف
- بیان
- ناموفق
- عدم
- شکست
- غلط
- خانواده
- ویژگی
- باز خورد
- کمی از
- رشته
- زمینه
- پرونده
- فیلتر
- پیدا کردن
- به دنبال
- پیروی
- برای
- انجمن
- چارچوب
- دوستان
- از جانب
- کاملا
- تابع
- توابع
- بیشتر
- بعلاوه
- تبادل نظر
- مولد
- هوش مصنوعی مولد
- دریافت کنید
- GitHub
- شیشه
- Go
- حکومت
- گراف
- گروه
- راهنمایی
- آیا
- he
- ارتفاع
- کمک
- کمک می کند
- او
- در سطح بالا
- برجسته
- خود را
- تاریخ
- صفحه اصلی
- میزبان
- میزبانی وب
- اما
- HTML
- HTTP
- HTTPS
- ID
- شناسایی
- شناسایی
- if
- پیاده سازی
- اجرای
- بهبود
- in
- مشمول
- شامل
- افراد
- لوازم
- اطلاعات
- اطلاع
- شالوده
- ورودی
- بینش
- در عوض
- دستورالعمل
- ادغام
- ادغام
- به
- موضوع
- مسائل
- IT
- کار
- شغل ها
- JPG
- تنها
- نگاه داشتن
- کلید
- کلید
- برچسب
- بزرگ
- بعد
- راه اندازی
- یاد گرفتن
- یادگیری
- ترک کرد
- محدود شده
- فهرست
- محلی
- ورود به سیستم
- منطق
- دیگر
- نگاه کنيد
- به دنبال
- دوست دارد
- دستگاه
- فراگیری ماشین
- ساخت
- مدیریت
- اداره می شود
- مدیریت
- تیم مدیریت
- روش
- کتابچه راهنمای
- دستی
- بسیاری
- روش
- متری
- متریک
- ML
- MLO ها
- تغییر
- مانیتور
- نظارت
- نظارت بر
- مانیتور
- بیش
- نقل مکان کرد
- چندگانه
- نام
- تحت عنوان
- نام
- بومی
- طبیعت
- هدایت
- جهت یابی
- لازم
- نیاز
- نیازهای
- جدید
- بعد
- nlp
- نه
- هیچ
- دفتر یادداشت
- عدد
- of
- پیشنهادات
- on
- ONE
- فقط
- عمل
- قابل استفاده
- عملیات
- گزینه
- or
- کدام سازمان ها
- سازمانی
- سازمان های
- دیگر
- ما
- خارج
- مشخص شده
- تولید
- به طور کلی
- خود
- قطعه
- پارامترهای
- احساساتی
- مسیر
- انجام
- انجام
- انجام
- مجوز
- دکترا
- خط لوله
- سکو
- افلاطون
- هوش داده افلاطون
- PlatoData
- لطفا
- نقطه
- سیاست
- پست
- پتانسیل
- شیوه های
- در حال حاضر
- قبلی
- روش
- فرآوری شده
- در حال پردازش
- بهره وری
- مشخصات
- ارائه
- ارائه
- فراهم می کند
- منتشر می کند
- اهداف
- فشار
- نمایش ها
- به سرعت
- واقعی
- زمان واقعی
- داده های زمان واقعی
- اخذ شده
- توصیه می شود
- منطقه
- مربوط
- مربوط
- گزارش
- ضروری
- مورد نیاز
- منابع
- منابع
- پاسخ
- نتایج
- راست
- نقش
- قانون
- قوانین
- دویدن
- در حال اجرا
- حکیم ساز
- همان
- مقیاس گذاری
- سناریو
- سناریوها
- حوزه
- خراش
- جستجو
- بخش
- بخش
- دیدن
- ارسال
- ارشد
- جداگانه
- خدمت
- بدون سرور
- سرویس
- خدمات
- تنظیم
- برپایی
- اشتراک گذاری
- به اشتراک گذاشته شده
- او
- باید
- نشان
- نشان داده شده
- نشان می دهد
- مشابه
- ساده کردن
- تنها
- کمی متفاوت
- هوشمند
- خانه هوشمند
- So
- راه حل
- مزایا
- منبع
- کد منبع
- متخصص
- خرج کردن
- گسترش
- پشته
- انباشته
- پشته
- مستقل
- راه افتادن
- وضعیت هنر
- وضعیت
- گام
- مراحل
- استراتژیک
- جریان
- جریان
- چنین
- مناسب
- پشتیبانی
- پشتیبانی از
- سیدنی
- سیستم
- جدول
- هدف
- اهداف
- وظایف
- تیم
- تیم ها
- که
- La
- نمودار
- اطلاعات
- منبع
- شان
- آنها
- آنجا.
- از این رو
- اینها
- این
- کسانی که
- سه
- از طریق
- زمان
- عنوان
- به
- ابزار
- جمع
- پی گیری
- مسیر
- آموزش
- دگرگون کردن
- درست
- امتحان
- دو
- نوع
- زیر
- غیر منتظره
- واحد
- us
- استفاده
- استفاده کنید
- استفاده
- کاربر
- کاربران
- استفاده
- با استفاده از
- استفاده
- تصدیق
- ارزش
- مختلف
- از طريق
- چشم انداز
- دید
- دید
- vs
- می خواهم
- مسیر..
- we
- وب
- خدمات وب
- چی
- چه زمانی
- که
- عرض
- اراده
- با
- در داخل
- مهاجرت کاری
- با این نسخهها کار
- شما
- شما
- زفیرنت
- زوم