اعتبار روش شناسی

مقدمه: اعتبار روش شناختی از جمله عوامل تاثیرگذار بر قضاوت ربط است. هدف این مطالعه، تعیین سهم و نوع تاثیر عناصر روش شناختی در تبیین ربط میان مدرک بوده و پرسش و تنها جنبه اثربخشی نظام بازیابی بدون ارزیابی کارایی بررسی شده است. روش ها: روش پژوهش نیمه تجربی (پیش آزمون-پس آزمون تک گروهی) و جامعه پژوهش مقالات کارآزمایی بالینی موجود در فراتحلیل مقالات مرور نظام مند نمایه شده در کاکرین و نمونه گیری هدفمند بود. مقالات کارآزمایی بالینی موجود در فراتحلیل دارای شماره پابمد موجود در مقالات مرور نظام مند دسترسی آزاد پایگاه کاکرین از ابتدا تا پایان سال 2018 (به عنوان پرسش نظام بازیابی) با حداقل 50 مقالات کارآزمایی بالینی دانلود شد. پیش پردازش متن و تعیین نمره «فراوانی اصطلاح- معکوس فراوانی متن» و شباهت سرعنوان های موضوعی پزشکی بین این مقادیر با نرم افزار نایم انجام شده و میانگین نمره «سودمندی تجمعی نزولی نرمالیزه» در گروه های با رتبه بندی مدارک در سطح به تنهایی مقایسه شد. یافته ها: نتایج آزمون تی زوجی نشان داد تفاوت میانگین ان دی سی جی در هر چهار گروه در تمامی نقاط دقت مدرک منفی است. بیشترین تفاوت میانگین مربوط به عناصر روش شناختی پایه و استاندارد در (064/ 0-) در نقطه دقت 10 (دهمین مدرک در نتایج بازیابی شده)، و کمترین تفاوت میانگین مربوط عناصر روش شناختی پایه در (0/021-) در نقطه دقت 50 و 70 بود. نتیجه گیری: یافته های این پژوهش نشان داد که رویداد عناصر روش شناختی در متن یا وزن دهی به آن ها می تواند نتایج مرتبط را کاهش دهد و می تواند بر اثربخشی نظام بازیابی بر پایه ربط و اعتبار تاثیر منفی داشته باشد.

پزشکیِ مبتنی بر شواهد، هدف متخصصان بالینی دستیابی به اطلاعات مرتبط و معتبر برای اتخاذ تصمیم بالینی مناسب است. بنابراین، در سامانه های بازیابی اطلاعات برای پاسخگویی به نیازهای اطلاعاتی متخصصان سلامت، دسترسی به مدارک مرتبط کفایت نمی کند و اعتبار روش شناختی آنها نیز بایستی مد نظر قرار گیرد. پژوهش حاضر از روش شبه آزمایشی پیش آزمون–پس آزمون تک گروهی به منظور دستیابی به اهداف پژوهش بهره می برد. جامعه پژوهش را کلیه مقالات کارآزمایی بالینی موجود در پایگاه «کاکرین» تا پایان سال 2018، میلادی تشکیل داد. نتایج پژوهش حاضر نشان داد که در بین متغیرهای پژوهش، کلماتی نظر «داور» به همراه چکیده بیشترین تأثیر را بر رتبه بندی داشت. این نتایج نشان داد که نظر داور «کاکرین» می تواند ابزاری مناسب برای استفاده در سامانه های رتبه بندی بر اساس ربط و اعتبار باشد. همچنین نتایج این پژوهش نشان داد که امکان رتبه بندی اعتبار روش شناختی و تلفیق آن با ربط با استفاده از عناصر درون و برون متنی مقالات وجود دارد. این پژوهش به تمایز انواع واژگان به کاررفته در متن مقالات علمی و تأثیر آن بر بهبود رتبه بندی بر پایه ربط و اعتبار روش شناختی پرداخت. در سامانه های بازیابی مبتنی بر زبان طبیعی، بیشتر بر کلیت متن تأکید بوده و به سهم انواع واژگان در تبیین ربط مقالات کمتر توجه شده است. یافته های این پژوهش بار دیگر، تفاوت انواع واژگان در تبیین ربط و اعتبار روش شناختی را برجسته نمود و لزوم تعیین مجموعه واژگان هدف در انواع جست وجوها را آشکار ساخت.