تهیهٔ فهرست بسامدی واژگان علمی فارسی با بهره گیری از پیکرهٔ علمی (مقاله علمی وزارت علوم)
درجه علمی: نشریه علمی (وزارت علوم)
آرشیو
چکیده
واژه های علمی واژه هایی هستند که در طیف وسیعی از رشته های علمی بسامد بالایی دارند و بسامدشان در متون علمی بسیار بیشتر از بسامدشان در سایر متون است. دسترسی به فهرستی بسامدی از واژه های علمی می تواند به یادگیری سریع تر زبان علمی کمک کند. پیش نیاز تهیه چنین فهرستی، ایجاد پیکره ای متوازن از متون علمی فارسی است. برای این منظور، متون علمی منتشرشده در نشریات علمی فارسی با برنامه نویسی رایانه ای و توسعه خزنده وب جمع آوری شد. در نهایت پیکره ای شامل بیش از ۵۱ میلیون واژه با حجم متوازنی از داده در چهار حوزه موضوعی شامل «علوم پایه و فنی و مهندسی»، «علوم انسانی و هنر و معماری»، «پزشکی و دامپزشکی» و «کشاورزی و منابع طبیعی» ساخته شد. در این پژوهش پس از بررسی ملاحظات مربوط به توسعه فهرست های بسامدی علمی، فهرستی از واژه های علمی فارسی تهیه شد که شامل ۳۰۷ بن واژه است که در متون علمی بسامد بالایی دارند، بسامدشان در متون علمی به مراتب بیش از متون عمومی است و پراکندگی مناسبی در موضوعات مختلف علمی دارند. نتایج ارزیابی فهرست بسامدی تهیه شده نشان دهنده پوشش بیش از ۱۶ درصدی فهرست روی متون علمی است که این درصد با پوشش فهرست های جمع آوری شده برای زبان های دیگر مطابقت دارد. همچنین توزیع مناسب واژه های فهرست جمع آوری شده در چهار حوزه موضوعی پیکره باعث شده است که میزان پوشش در هر یک از این حوزه های موضوعی نیز عددی قابل قبول بین ۱۲ تا ۱۸ درصد باشد. فهرست واژه های علمی استخراج شده می تواند برای اهداف مختلف آموزشی و پژوهشی مورداستفاده قرار گیرد. همچنین پیکره علمی تهیه شده نیز منبع ارزشمندی برای مطالعات حوزه زبان شناسی پیکره ای و پژوهش های مرتبط با پردازش زبان است.Development of a Persian Academic Word List Based on an Academic Corpus
Academic words occur with high frequency in texts from a wide range of scientific fields, and their frequency in academic texts is much higher than in general texts. Academic wordlists can facilitate the learning and teaching of scientific language. In this research, we have developed a frequency list of Persian academic words. The word list includes 307 word lemmas with a high frequency in academic texts. Creating a balanced corpus of Persian academic texts was the prerequisite for developing such a list. For this purpose, we collected scientific texts published in Persian scientific journals and built a balanced corpus containing more than 51 million words. The corpus includes texts of academic papers in four general categories, i.e., basic sciences and engineering; humanities, arts, and architecture; medicine and veterinary medicine; agriculture and natural resources. We used four different criteria for lemmas to be included in our wordlist. 1- frequency: The lemmas should have a relative frequency of at least 30 per million words. 2- ratio: The relative frequency of the lemmas in the academic corpus should be two times greater than their frequency in a 10 million word general corpus. 3- dispersion: Juilland's D value of the lemmas in the four sections should be at least 0.5. 4- range: the observed frequency of the lemma should not be less than a third of its expected frequency in any of the four sections of the corpus. We evaluated the wordlist by measuring its coverage in our corpus's train and test sections. The wordlist covers 16.69 percent of the train subset and 16.13 percent of the test subset.
تبلیغات
