دانلود مقاله ترجمه شده ارزیابی برچسب زنی آماری ادات سخن (بخش گفتار) در متون فارسی

چکیده

برچسب زنی ادات سخن (POS) یک بخش ضروری نرم افزار های پردازش متن می باشد. یک برچسب زن POS به هر کلمه ی متن  ورودی آن یک برچسب اختصاص می دهد که مشخص کننده ی ویژگی های گرامری و نحوی آن می باشد. یکی از محبوبترین برچسب زن های POS برچسب زن TnT می باشد. نشان داده شده است که این برچسب زن دارای دقت بالای در انگلیسی و برخی زبان های دیگر است. دانستن نحوه ی عملکرد یک شیوه در زبان های دیگر همیشه جالب و مورد توجه بوده است چرا که این کار فهم ما را از شباهت ها و تفاوت های بین آن دو افزایش می دهد. در مورد شیوه های آماری، از جمله TnT ، یک مزیت  کاربردی نیز به موارد قبل اضافه می شود. در این مقاله ساختن یک مجموعه ی برچسب زده شده POS ارائه می شود و همچنین برچسب زن TnT بر متون فارسی ارزیابی می شود. نتایج آزمایشات بر متون فارسی نشان می دهد که TnT  صحت کلی 96.64 درصدی را داراست و برای کلمات مشخص وشناخته شده دارای دقت 97.01 درصد و برای کلمات ناشناخته دارای دقت 77.77 درصد می باشد.

1-مقدمه

برچسب زنی ادات سخن برای کلمات یک جمله دنباله ای از دسته های ترکیبی (صرفی نحوی) را که بیشترین احتمال درستی را دارند، انتخاب می کند. این برچسب زنی مشخصه های گرامری کلمات از جمله ادات سخن، اعداد صرف ونحوی، جنسیت، چندم شخصی و.. را مشخص می کند....