שיעור 17 – lexical semantics

28
ררררר17 –Lexical Semantics ררר ררר רררר ררררר

Upload: joel-dawson

Post on 04-Jan-2016

70 views

Category:

Documents


6 download

DESCRIPTION

שיעור 17 – Lexical Semantics. יעל נצר מדעי המחשב. Lexical Semantics – התחום העוסק במערכת מבוססת המשמעות של המילים. Lexeme – "כניסה בלקסיקון" שהוא אוסף של זוגות, המצמד מחרוזת כתובה (צורה אורתוגרפית) וצורה פונולוגית, עם ייצוג כלשהו של משמעות (ה- sense של המילה). - PowerPoint PPT Presentation

TRANSCRIPT

17שיעור –Lexical Semantics

יעל נצר

מדעי המחשב

Lexical Semantics התחום העוסק – במערכת מבוססת המשמעות של המילים.

Lexeme כניסה בלקסיקון" שהוא אוסף של" – זוגות, המצמד מחרוזת כתובה )צורה

אורתוגרפית( וצורה פונולוגית, עם ייצוג כלשהו של המילה(.senseשל משמעות )ה-

.lexemesלקסיקון הוא קבוצה סופית של

מילונים

מילונים מכילים בד"כ מעגליות בהגדרות והכתוב בהם הוא בד“כ אינו הגדרות אלא תיאור של המילים בעזרת

מילים אחרות.Main Entry: 2left

Function: nounDate: 13th century1 a : the left hand b : the location or direction of the left side c : the part on the left side2

a : LEFT FIELD b : a blow struck with the left fist3 often capitalized a : the part of a legislative

4921278.odu

קשרים בין מילים

ובכל זאת, ניתן ללמוד הרבה על מילים מתוך ניתוח ותיוג הקשרים בינן ובין מילים אחרות.

הרעיון המנחה הוא שמילים אינן 'יחידות אטומיות' אלא יש להם מבנה פנימי שמשפיע, למשל, על האופי שבו הן

יכולות להופיע למשל עם מילים אחרות וליצור משפטים.

יש כמובן דרכים רבות להסתכל להגדיר ולנתח יחסים סמנטיים, והגישה כאן היא 'אפליקטיבית' – ופחות

בלשנית: איך נראים מקורות מידע על מילים, המספקים מידע סמנטי בצורה שימושית.

קשרים בין מילים

ניתן להגדיר יחסים בין מילים בצורות שונות, אבל לכמה יש ערך מוגבר ביישומים חישוביים. למשל, פעולה

substitutionחשובה ביותר היא פעולה של החלפה – אילו מילים, למשל , יכולות להחליף אחת את

השנייה.Homonymy

PolysemySynonymyHyponymy

Homonymy

הקשר בין מילים שלהן אותה צורה אך חסרות קשר במשמעותן.

bankדוגמא קלאסית: Instead, a bank can hold the investments in a custodial account in the client’s name.But as agriculture burgeons on the east bank, the river will shrink even more.

ואת השני bank1ניתן להחליף את המופע הראשון ב-, לציין שאלו מילים שונות שרק במקרה יש להן bank2ב-

אותה צורה אורתוגרפית.

homonymyכמה הערות על

beיש מילים שנשמעות אותו דבר איך אינן נכתבות אותו דבר vs. bee שלא יחשבו ,homonymy אלא

homophones.כלומר, רק מילים שלהן יש בד"כ "אותה כניסה בלקסיקון" הן

הומונימיות.יש מילים הומונימיות בכתיבה שמבוטאות אחרת – אלה יקראו

homographs.ובד"כ לא יחשבו כהומונימיות

וכידוע, יש מילים שנכתבות אותו דבר אך שייכות לחלקי דיבר אחרים – ונבדלות, למשל, בסביבה תחבירית שונה, וכן ההטיות

והגזירות האפשריות שונות עבורן. ,findמצד רביעי, יכול להיות דמיון מוחלט בין הטיות למשל

found-ו .found.)ייסד(

השפעת ההומונימיות באפליקציות

אם רוצים למצוא משמעות של מילה רב משמעית בהקשר מסוים, הגדרת הרב-משמעות

היא תלוית אפליקציה:found/foundedתיקון שגיאות: למשל –

גם ( to, two, too)זיהוי קול: מלבד הומופונימיות הומונימיות משפיעה: מאחר שמבוסס על מודל שפה

n-gram המילה הנפוצה יותר תקבל ניקוד גבוהה – יותר מתוך הסביבה שהיא מופיעה בה, וההפך.

.text to speechכמו גם באיחזור מידע או

Polysemy

פוליסמיות היא כאשר למילה יש כמה משמעויות הקשורות זו לזו.

While some banks furnish sperm only to married women, others are much less restrictive.

יהיה בלתי עקבי עם bank3לתת לבנק מסוג זה סימן מושג ההומונימיות.

לא תמיד זה כל כך ברור..ניתן לעיתים להסתמך על ההיסטוריה של המילה

etymology.)?( או לטעון לצירוף מקרים .

?Polysemyאיך מוצאים

בהנתן מילה, אפשר לשאול:מהן המשמעויות האפשריות של המילה?

האם הן קשורות אחת לשניה?איך ניתן להבחין ביניהן )בצורה "מבוססת"(?

לקסיקוגרפים הבונים מילונים משתמשים בד"כ בקורפוס גדול של השפה. במילונים לשימוש על

ידי אנשים בד"כ יש לכל מילה כניסות רבות אפשרי )בין אם הומונימי או senseעבור כל

פוליסמי(.

דוגמאות

They rarely serve red meat, preferring to prepare seafood, poultry or game birds.He served as US ambassador to Norway in 1976 and 1977.He might have served his time, come out and led an upstanding life.

Synonymy

שונות בעלי אותה משמעותlexemesמילים )אבל מה זה בדיוק 'בעלי אותה משמעות'?(

– שתי מילים יחשבו כמילים substitutabilityהחלפה נרדפות אם ניתן להחליף אותן במשפט בלי לשנות את

של המשפט.acceptabilityהמשמעות או את ה'נכונות' How big is that plane?Would I be flying on a large or small plane?אולם, אם מושג ה'החלפה' צריך להיות תקף בכל מופע של

המילה – אזי יש הרבה פחות מילים שהן נרדפות.לכן, צריך להוסיף למושג ההחלפה שמילים הן ברות החלפה –

נרדפות אם קיימות סביבות שבהן ניתן להחליפן זו בזו.

Synonymy

יכולת ההחלפה בהינתן זוג מילים מועמדות, תלויה בארבעה גורמים לפחות:

Polysemyגוונים דקים במשמעות

collocationsאילוצי register

השפעת פוליסמיות על נרדפות

Miss Nelson, for instance, became a kind of a big sister to Mrs. Van Tassel’s son, Benjamin.?Miss Nelson, for instance, became a kind of a large sister to Mrs. Van Tassel’s son, Benjamin.Big – polysemy =~ older, grown up

גוונים של משמעות – למילים נרדפות

What is the cheapest first class fare??What is the cheapest first class price?More of an intuition judgement.Fare – more for ‘services’Price – more for ‘objects’ like tickets.

תיאור מדויק יותר של ההבדלים מצריך בדיקה מדוקדקת יותר בקורפוס גדול.

Collocational constraints

שתי ההשפעות הקודמות מתייחסות למשמעות של המילה.

ההשפעות האחרות אינן סמנטיות:

הכוונה בקולוקציות מתייחסת לקשרים או ל'משיכה' בין -גרמים.nמילים כמו שניתן למשל לזהות במודלים

We frustrate them and frustrate them and pretty soon they make a big mistake.?We frustrate them and frustrate them and pretty soon they make a large mistake.

Register

ההקשרים החברתיים המשפיעים על השימוש במילים נרדפות )ע.ע. סיים וגמר(.

מילים לא ניתנות להחלפה בשל גורמים כגון נימוס, סטטוס, לחץ חברתי.

המשמעות החישובית של מילים נרדפות: תלוי באפליקציה, למשל ביצירת שפות טבעיות, תרגום

אוטומטי. פחות חשוב, למשל, באיחזור מידע.

Hyponymy

היפונימיות היא זוג שבו מילה אחת מתייחסת לתת קבוצה של השניה.

.vehicle ו-carלמשל hypernymyהיחס אינו סימטרי והיחס ההפוך נקרא

כמו ביחס המילים הנרדפות, ניתן לזהות היפונימיות על ידי החלפה מהסוג:

That is a x => That is a y, אזי אם המשפט y של hyponym הוא xאם

השמאלי נכון אז גם המשפט הימני נכון.

hyponymyהקשרים חישוביים ל-

אונטולוגיה – מתייחסת בד"כ לקב' האובייקטים המתארת תחום או 'עולם' )או תת עולם(.

, taxomonyאונטולוגיה מסודרת בד"כ באיזשהו איזשהו ארגון 'עצי'.

hound, muttלא בהכרח היררכיה – למשל המילים and puppy הן היפונימיות למילה dog אך בסוג

שונה של יחסים אחת מהשניה.יחסי היפונימיות אינם בונים אונטולוגיה או מבנה

היררכי, אך הם מספקים 'הערכה טובה' לכך.

Wordnet

הרעיון הוא לפתח לקסיקון ממוחשב המכיל את הקשרים בין המילים. מקורות אפשריים: מילונים

קיימים, תזארוסים, או בניית הלקסיקון מ'דף חלק'.Wordnet נבנה בשיטה השנייה, ע"י - Fellbaum

.1998ושות' מורכב משלושה בסיסי נתונים: אחד לשמות עצם, אחד

adverbs andלפעלים, והשלישי לשמות תואר adjectives.

closed classמילים השייכות לקבוצה הסגורה lexical items-אינן קיימות ב wordnet.

כניסות הן צורות אורטוגפיות ייחודיות, מלוות בקב' לכל צורה.sensesמשמעויות

יש:1.6בגירסא Category Unique SensesNouns 94474 116317Verb 10319 22066Adjective 20170 29881Adverbs 4546 5677

.c או מתוך ספריות shell, בbrowserניתן להשתמש ב

wordnetנתונים על

לכל כניסה - wordnetבגרסא המלאה, מכיל קב' של מילים נרדפות, הגדרה 'מילונית' , וכמה

דוגמאות לשימוש.

ובין homonymyאין הפרדה בין polysemy.

משקף את ההנחה שהפרדה כזו קשה להגדרה ונתונה לעיתים לשיפוט.

והמבדיל אותו ממילונים wordnetהייחוד ב-רגילים הוא בשימוש שהוא עושה בקב' יחסים

domain independent.בין המילים ,

היחסים מוגדרים על מילים, משמעויות או קב' מילים נרדפות. היחסים מוגבלים לאותו בסיס

נתונים )כלומר אותו חלק דיבר(.

טבלאות היחסים.604עמ'

synsets

הוא יכולת ההחלפה בין synonymyהבסיס ליחס ה-מילים בהקשר כפי שהוגדר קודם.

Synset:הוא קב' מילים נרדפות {chump, fish, fool, gull, mark, patsy, fall guy, sucker, schlemiel, shlemiel, soft touch, mug}

)בקיצור, פראייר.( synsets.בונים בעצם את המשמעות הנקשרת עם מילה

כאל המושג שמומש synsetכלומר, אפשר להתייחס ל-.lexicalizedבעזרת מילה בשפה

wordnet ב-hyponymyיחס ה-

wordnetהיחס, כפי שהוגדר קודם, קיים בומאפשר בניית שרשראות של יחסי היפרנימיות

)או היפונימיות( בין המילים.

הרצה ביוניקס:wn floor –hypenwn floor –hyponwn floor -synsn

Synonyms/Hypernyms (Ordered by Frequency) of noun floor7 senses of floor

Sense 1floor, flooring => horizontal surface, level

Sense 2floor, level, storey, story => structure, construction

Sense 3floor => control

Sense 4floor => land, dry land, earth, ground, solid ground, terra firma

Sense 5floor => surface, Earth's surface

Sense 6floor => hall

Sense 7floor => room

Hyponyms of floorHyponyms of noun floor2 of 7 senses of floor

Sense 1floor, flooring => bell deck => dance floor => floorboard

Sense 2floor, level, storey, story => basement, cellar => ground floor, first floor, ground level => loft, attic, garret => loft => mezzanine, mezzanine floor

(some )Hypernyms of floor

Sense 1floor, flooring => horizontal surface, level => surface => artifact, artefact => object, inanimate object, physical object => entity

Sense 2floor, level, storey, story => structure, construction => artifact, artefact => object, inanimate object, physical object => entity