مجموعه تست (Test Collection)

فهرست عناوین اصلی در این پاورپوینت

فهرست عناوین اصلی در این پاورپوینت

● محتوای ارائه
● سیستم‌های بازیابی اطلاعات (Information Retrieval Systems)
● مجموعه تست (Test Collection)
● انواع مجموعه‌های تست
● ساخت مجموعه‌های تست
● هدف
● محتوای ارائه
● نمونه‌هایی از مجموعه‌های تست
● روش‌های ساخت مجموعه قضاوت
● معیارهای ارزیابی سیستم‌های بازیابی اطلاعات
● روشهای بررسی اسناد قضاوت نشده
● روش‌های ارزیابی قابلیت استفاده‌ی مجدد مجموعه‌های تست
● نوآوری
● محتوای ارائه
● ارزیابی قابلیت استفاده مجدد با کمک بازه اطمینان
● ارزیابی قابلیت استفاده مجدد با کمک بازه اطمینان …
● Multinomial Logistic Regression
● شباهت بین اسناد
● محتوای ارائه
● پیاده‌سازی و آزمایشات
● پیاده‌سازی و آزمایشات…
● نمونه اجرایی
● نمونه اجرایی…
● نتایج آزمایشات برای مجموعه تست غیر دودیی (MAHAK)
● نتایج آزمایشات برای مجموعه تست دودیی (همشهری)
● محتوای ارائه
● نتیجه گیری
● مقالات علمي استخراج شده از پایان نامه
● مراجع

عبارات مهم استفاده شده در این مطلب

عبارات مهم استفاده شده در این مطلب

مجموعه تست, بازیابی اطلاعات, مجموعه های تست, سیستم های بازیابی, قابلیت مجدد, مجدد مجموعه, ارزیابی سیستم, مجموعه قضاوت, سیستم بازیابی,

نوع زبان: فارسی حجم: 0.83 مگا بایت
نوع فایل: اسلاید پاورپوینت تعداد اسلایدها: 32 صفحه
سطح مطلب: نامشخص پسوند فایل: pptx
گروه موضوعی:  زمان استخراج مطلب: 2019/06/05 11:49:53

لینک دانلود رایگان لینک دانلود کمکی

اسلایدهای پاورپوینت مرتبط در پایین صفحه

توجه: این مطلب در تاریخ 2019/06/05 11:49:53 به صورت خودکار از فضای وب آشکار توسط موتور جستجوی پاورپوینت جمع آوری شده است و در صورت اعلام عدم رضایت تهیه کننده ی آن، طبق قوانین سایت از روی وب گاه حذف خواهد شد. این مطلب از وب سایت زیر استخراج شده است و مسئولیت انتشار آن با منبع اصلی است.

http://wtlab1.um.ac.ir/images/seminars/docs/kh-arshad.pptx

در صورتی که محتوای فایل ارائه شده با عنوان مطلب سازگار نبود یا مطلب مذکور خلاف قوانین کشور بود لطفا در بخش دیدگاه (در پایین صفحه) به ما اطلاع دهید تا بعد از بررسی در کوتاه ترین زمان نسبت به حدف با اصلاح آن اقدام نماییم. جهت جستجوی پاورپوینت های بیشتر بر روی اینجا کلیک کنید.

عبارات پرتکرار و مهم در این اسلاید عبارتند از: مجموعه تست, بازیابی اطلاعات, مجموعه های تست, سیستم های بازیابی, قابلیت مجدد, مجدد مجموعه, ارزیابی سیستم, مجموعه قضاوت, سیستم بازیابی,

مشاهده محتوای متنیِ این اسلاید ppt

مشاهده محتوای متنیِ این اسلاید ppt

ارزیابی قابلیت استفاده مجدد مجموعه تست‌ها دارای قضاوت‌های چندسطحی reusability assessment of test collections with relevance levels of judgments مریم خدابخش page  ۱ محتوای ارائه مقدمه پیشینه روش پیشنهادی نتایج، تحلیل و ارزیابی نتیجه‌گیری و کارهای آتی page  ۲ سیستم‌های بازیابی اطلاعات information retrieval systems تعریف موتورهای جستجو ملموس‌ترین نمونه از سیستم‌های بازیابی اطلاعات است که برای بازیابی اسناد html در وب به کار می رود. شکل ۱ نمایی از یک سیستم بازیابی اطلاعات web ۲ ۱ page  ۳ مجموعه تست test collection تعریف کاربرد کارایی سیستم‌های بازیابی اطلاعات براساس میزان ارتباط نتایج جستجو با پرسش کاربر از طریق منبعی به نام مجموعه تست ارزیابی می‌شود. شکل ۲ نمایی از مجموعه تست و سیستم بازیابی اطلاعات web ۲ ۱ page  ۴ انواع مجموعه‌های تست در مجموعه‌های تست با قضاوت‌های چند سطحی، قضاوت در مورد ارتباط هر سند به پرسش در قالب یک عدد بیان می‌شود که نمایان‌گر میزان ارتباط محتوای هر سند به پرسش می‌باشد. کاربرد مجموعه‌های تست با قضاوت‌های چند سطحی در محیط‌هایی مثل وب jär ۲ کاربر معمولا اسناد ابتدای لیست را نگاه می‌کند که بهتر است این اسناد خیلی مرتبط باشند. مجموعه تست غیر دودویی دودویی قضاوت‌های ترجیحی ارتباط جنبه چند سطحی page  ۵ ساخت مجموعه‌های تست تهیه مجموعه اسناد کار دشواری نیست. ساخت مجموعه‌ پرسش‌ها کار دشواری نیست car ۲ ۸ . در مجموعه تست‌های بزرگ امکان قضاوت درمورد ربط تمام سندها به تمام پرسش‌های موجود در مجموعه ممکن نیست san and joh ۲ ۴ . ساخت مجموعه قضاوت زمان‌بر و هزینه‌بر است و مستلزم تلاش انسانی است san and joh ۲ ۴ car and ben ۲ ۸ . اگر مجموعه تست فاقد قضاوت‌ها کافی باشد، در ارزیابی سیستم‌های بازیابی اطلاعات خوب عمل نمی‌کند car ۲ ۸ . بنابراین توسعه دهندگان مجموعه تست باید بین تعداد قضاوت‌ها و هزینه ساخت آن مصالحه انجام دهند. اطمینان از کافی بودن تعداد قضاوت‌های مجموعه تست page  ۶ تعریف مسئله مسئله اطمینان از میزان کارآیی مجموعه تست در ارزیابی سیستم‌های بازیابی اطلاعات قابلیت استفاده مجدد . قابلیت استفاده مجدد یعنی اطمینان از کافی بودن مجموعه قضاوت‌هایِ موجود در مجموعه تست. هر چه به قضاوت‌های بیشتری نیاز باشد قابلیت استفاده مجدد از مجموعه تست کاهش می‌یابد. قابلیت استفاده مجدد یک معیار کیفی است. اهمیت عملی مسئله کمک به تولیدکنندگان مجموعه تست در تعیین این که آیا یک مجموعه موجود از قضاوت‌ها برای ارزیابی سیستم‌های بازیابی اطلاعات مناسب است یا به قضاوت‌های بیشتری نیاز است. page  قابلیت استفاده مجدد از دیدگاه تولید کننده مجموعه تست قابلیت استفاده مجدد یک مجموعه تست با تعداد قضاوت‌های موجود در مجموعه تست رابطه مستقیم دارد. هرچه مجموعه قضاوت به سمت کامل بودن پیش رود قابلیت استفاده مجدد مجموعه تست افزایش می‌یابد car ۲ ۸ . کیفی یعنی آیا بقدر کافی است ۷ هدف ارائه روشی برای ارزیابی قابلیت استفاده مجدد مجموعه تست با قضاوت‌های چند سطحی بدین منظور باید از کافی بودن تعداد قضاوت‌های موجود در مجموعه تست اطمینان حاصل کرد. برای نشان دادن این اطمینان از بازه اطمینان استفاده می‌شود که برای یک معیار ارزیابی محاسبه می‌شود. پهنای بازه‌های اطمینان، نماینده‌ای از قابلیت استفاده مجدد مجموعه تست می‌باشد. page  ۸ محتوای ارائه مقدمه پیشینه روش پیشنهادی نتایج، تحلیل و ارزیابی نتیجه‌گیری و کارهای آتی page  ۹ نمونه‌هایی از مجموعه‌های تست آدرس تعداد قضاوت‌ها تعداد پرسش‌ها تعداد اسناد نوع توضیحات نام مجموعه تست http trec.nist.gov ۱۹۳۸۱ ۵ ۱ ۴ ۸ ۹۷ ۵ غیر دودویی میلیون‌ها صفحات وب از clueweb ۹ dataset trec ۲ ۱۱ http ir.dcs.gla.ac.uk resources test collections cran ۱۸۳۷ ۲۲۵ ۱۴ دودویی مقاله‌های تکنیکی درمورد حرکت گاز و هوا cranfield http cacm.acm.org ۷۹۶ ۶۴ ۳۲ ۴ دودویی خلاصه‌های acm cacm http ce.sharif.edu ~shesmail mahak ۱۱۹۶ ۲۱۶ ۳ ۶ غیر دودویی شامل خبرهای isna mahak http ece.ut.ac.ir dbrg hamshahri publications.html ۲۱۷۴۳ ۵ ۳۲ دودویی خبرهای روزنامه همشهری hamshahri ۲ page  ۱ روش‌های ساخت مجموعه قضاوت نمونه‌گیری تصادفی har ۱۹۹۲ جستجو و قضاوت تعاملی interactive searching and judging san and joh ۲ ۴ cor ۱۹۹۸ بازخورد ارتباطی relevance feedback sob ۲ ۳ san and joh ۲ ۴ pooling car and gab et al. ۲ ۱ روش pooling joh ۲ ۷ page  چندین ارزیاب انسان از یک سیستم بازیابی اطلاعات عادی استفاده می‌کنند. با کمک این سیستم هر ارزیاب تلاش می‌کند تا بهترین و کامل‌ترین مجموعه‌ی اسناد مرتبط با هر پرسش را به دست آورد. در همین راستا ارزیاب‌ها از مترادف‌های واژگان پرسش، زیرمجموعه‌های واژگان پرسش برای ایجاد پرسش دیگر استفاده می‌کنند. شبیه به روش جستجو و قضاوت تعاملی می‌باشد با این تفاوت که از بازخوردهای ارتباطی برای تولید پرسش جدید استفاده می‌شود. روش کار در relevance feedback به صورت زیر است کاربر یک پرسش را تولید می کند. سیستم بازیابی یک لیست از نتایج را ایجاد می کند. کاربر لیست اسناد مرتبط و نامربط با پرسش را مشخص می کند. سیستم با استفاده از اسناد مرتبط مشخص شده به عنوان feedback دوباره لیستی را ارائه می دهد. برای feedback می توان از الگوریتم های متفاوتی استفاده کرد rocchio feedback rocchio with positive feedback only model based feedback lan guage modeling paradigm یکی از رایج‌ترین و شناخته شده ترین روش‌های است. اسنادی مورد قضاوت قرار می‌گیرد که توسط چندین سیستم بازیابی شده است و قضاوت محدود به اسنادی می‌شود که بی ربط بودن آن‌ها بعید است. ۱۱ معیارهای ارزیابی سیستم‌های بازیابی اطلاعات فرمول نام نوع precision دودویی recall average precision mean average precision general precision kek ۲ ۲ غیر دودویی general recall kek ۲ ۲ graded average precision rob ۲ ۱ normalized discounted cumulative gain jär ۲ page  معیارهای متفاوتی برای ارزیابی کارایی سیستم‌های بازیابی اطلاعات وجود دارد. قبل از استفاده از این معیارها به این نکته باید توجه کرد که چه تعریفی برای ارتباط در نظر گرفته شده است. im سطح ارتباطی سند m است. ri تعدا کل اسناد در سطح ارتباطی i assume relevance grades … c – for non ­‐relevant c positive graded g i p user threshold is at i for i ∈ ۱ … c i.e. user regards grades i …c as relevant grad … i ­‐۱ as not relevant g i s sum to one ۱۲ روشهای بررسی اسناد قضاوت نشده نوع نام نادقیق اسناد قضاوت نشده، نامرتبط فرض شوند دودویی binary preference buc ۲ ۴ معرفی معیارهای جدید دودویی inferred average precision yil ۲ ۶ دودویی کلیک rad ۲ ۶ رفتار کاربر تخمین ربط هر سند به پرسش دودویی svm büt ۲ ۷ دسته بندی غیر دودویی multinomial logistic regression page  شرط استفاده از معیارها ارزیابی این است که مجموعه‌ قضاوت کامل باشد یعنی هر سند بازیابی شده برای هر پرسش، قضاوت شده باشد. روش های گوناگونی برای بررسی اسناد قضاوت نشده معرفی شده است یک مجموعه تست با مجموعه قضاوت کامل در دسترس است.نتیجه ارزیابی سیستم های بازیابی اطلاعات با …

کلمات کلیدی پرکاربرد در این اسلاید پاورپوینت: مجموعه تست, بازیابی اطلاعات, مجموعه های تست, سیستم های بازیابی, قابلیت مجدد, مجدد مجموعه, ارزیابی سیستم, مجموعه قضاوت, سیستم بازیابی,

این فایل پاورپوینت شامل 32  اسلاید و به زبان فارسی و حجم آن 0.83 مگا بایت است. نوع قالب فایل pptx بوده که با این لینک قابل دانلود است. این مطلب برگرفته از سایت زیر است و مسئولیت انتشار آن با منبع اصلی می باشد که در تاریخ 2019/06/05 11:49:53 استخراج شده است.

http://wtlab1.um.ac.ir/images/seminars/docs/kh-arshad.pptx

  • جهت آموزش های پاورپوینت بر روی اینجا کلیک کنید.
  • جهت دانلود رایگان قالب های حرفه ای پاورپوینت بر روی اینجا کلیک کنید.

رفتن به مشاهده اسلاید در بالای صفحه


پاسخی بگذارید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *