Embedding نمایش عددی یک داده مانند متن یا تصویر در قالب برداری با ابعاد مشخص است. مدل تلاش میکند ویژگیهای معنادار ورودی را در این بردار بازتاب دهد.
در جستوجوی معنایی متن پرسش و اسناد به بردار تبدیل میشوند. شباهت برداری معادل صحت یا ارتباط قطعی نیست.
Embedding متن پرسش و اسناد باید با مدل سازگار ساخته شود. نزدیک بودن دو بردار به معنی صحت واقعی پاسخ نیست.
درک تفاوت این موضوع با پردازش زبان طبیعی و توکنسازی به انتخاب راهکار مناسبتر کمک میکند.
بردارسازی معنایی در جستوجو
دو جمله با واژههای متفاوت ممکن است Embeddingهای نزدیک داشته باشند، چون معنی مشابهی دارند. کیفیت بازیابی باید با داده دامنه ارزیابی شود و جستوجوی برداری لزوماً جایگزین جستوجوی دقیق شناسه و فیلتر نیست.