How to Fine Tune a Trans (Hugging Face) مدل ترانسفورماتور

تصویر
عکس پروفایل Akis Loumpourdis Hacker Noon

عکس از میک دی پائولا در Unsplash

عنوان مجموعه “شاید فقط سریع” از متداول ترین پاسخ من به “یک نوشیدنی دلپذیر است؟” الهام گرفته شده است ، که ممکن است در یک شب طولانی به پایان برسد. به همین ترتیب ، این پست ها کوتاه هستند اما من گاهی اوقات خودم را فراری می دهم ، پیشاپیش عذرخواهی می کنم.

درباره ? ترانسفورماتورها

? ترانسفورماتور (ترانسفورماتور صورت آغوش) مجموعه ای از پیشرفته ترین مدل های NLU (درک زبان طبیعی) و NLG (تولید زبان طبیعی) است. آنها طیف گسترده ای از معماری را برای انتخاب (BERT ، GPT-2 ، RoBERTa و غیره) و همچنین مجموعه ای از مدل های از قبل آموزش دیده بارگذاری شده توسط کاربران و سازمان ها ارائه می دهند.

تنظیم دقیق یک مدل

یکی از مواردی که این کتابخانه را به ابزاری قدرتمند تبدیل کرده این است که می توانیم از مدل ها به عنوان پایه ای برای انجام وظایف یادگیری استفاده کنیم. به عبارت دیگر ، آنها می توانند نقطه شروع استفاده از برخی تنظیمات دقیق با استفاده از داده های خود ما باشند. این کتابخانه به گونه ای طراحی شده است که به راحتی با Tensorflow یا PyTorch کار می کند.

as مجموعه داده ها

Hugging Face Datasets یک کتابخانه بسته بندی شده است که برخی ابزارها را برای بارگیری و پردازش داده ها در بسیاری از قالب های معمول (CSV ، JSON و غیره) فراهم می کند. همچنین به اشتراک گذاری مجموعه داده ها و معیارها برای پردازش زبان طبیعی بسیار آسان است.

as مجموعه های داده از چنگال مجموعه های جذاب TensorFlow و …

سئو PBN | خبر های جدید سئو و هک و سرور