رمز

ساخت وبلاگ

آخرین مطالب

امکانات وب

رمز

تعداد کاراکترهای یونیکد در نشانه، یعنی token. text.

مثال

نام شرح
بازگشت تعداد کاراکترهای یونیکد در توکن. بین المللی

روش کلاس Token. set_extension

یک ویژگی سفارشی در Token تعریف کنید که از طریق Token در دسترس می شود. _ . برای جزئیات، به مستندات مربوط به ویژگی های سفارشی مراجعه کنید.

مثال

نام شرح
نام نام ویژگی برای تنظیم توسط پسوند. به عنوان مثال، "my_attr" به عنوان نشانه در دسترس خواهد بود. _. my_attr . خ
پیش فرض مقدار پیش فرض اختیاری مشخصه در صورتی که هیچ گیرنده یا روشی تعریف نشده باشد. اختیاری [هر کدام]
روش یک متد سفارشی روی شی تنظیم کنید، برای مثال token. _.compare(other_token) . اختیاری [ قابل فراخوانی [ [ نشانه , … ] , هر ]]
گیرنده تابع Getter که شی را می گیرد و مقدار مشخصه را برمی گرداند. زمانی فراخوانی می شود که کاربر به ویژگی . _ دسترسی پیدا کند. اختیاری [ قابل فراخوانی [ [ نشانه ] , هر ] ]
تنظیم کننده تابع Setter که Token و یک مقدار را می گیرد و شی را تغییر می دهد. زمانی فراخوانی می شود که کاربر در ویژگی Token. _ می نویسد. اختیاری [ قابل فراخوانی [ [ نشانه , هر ] , هیچ ]]
زور بازنویسی اجباری ویژگی موجود. بوول

روش کلاس Token. get_extension

یک برنامه افزودنی قبلاً ثبت شده را با نام جستجو کنید. اگر پسوند ثبت شده باشد، یک 4 تاپل (پیش فرض، روش، گیرنده، تنظیم کننده) را برمی گرداند. در غیر این صورت یک KeyError ایجاد می کند.

مثال

نام شرح
نام نام پسوند. خ
بازگشت یک تاپل (پیش فرض، روش، گیرنده، تنظیم کننده) از پسوند. تاپلی [ اختیاری [ هر ] , اختیاری [ قابل فراخوانی ] , اختیاری [ قابل فراخوانی ] اختیاری [ قابل فراخوانی ]

Token. has_extension classmethod

بررسی کنید که آیا یک برنامه افزودنی در کلاس Token ثبت شده است یا خیر.

مثال

نام شرح
نام نام برنامه افزودنی برای بررسی. خ
بازگشت آیا پسوند ثبت شده است. بوول

روش کلاس Token. remove_extension

پسوند ثبت شده قبلی را حذف کنید.

مثال

نام شرح
نام نام پسوند. خ
بازگشت یک تاپل (پیش فرض، روش، دریافت کننده، تنظیم کننده) از پسوند حذف شده. تاپلی [ اختیاری [ هر ] , اختیاری [ قابل فراخوانی ] , اختیاری [ قابل فراخوانی ] اختیاری [ قابل فراخوانی ]

روش Token. check_flag

ارزش یک پرچم بولی را بررسی کنید.

مثال

نام شرح
flag_id شناسه ویژگی پرچم که باید بررسی شود. بین المللی
بازگشت آیا پرچم تنظیم شده است. بوول

روش Token. similarity مدل نیاز

تخمین تشابه معنایی را محاسبه کنید. پیش فرض کسینوس بر بردارها.

مثال

نام شرح
دیگر هدف مقایسه با. به طور پیش فرض ، اشیاء Doc ، Span ، Token و Lexeme را می پذیرد. اتحادیه [Doc ، Span ، Token ، Lexeme]
بازگشت نمره شباهت مقیاس. بالاتر شبیه تر است. شناور

روش token. nbor

یک نشانه همسایه بگیرید.

مثال

نام شرح
i موقعیت نسبی نشانه برای بدست آوردن. پیش فرض به 1. در نظر گرفتن
بازگشت نشانه در موقعیت خود. doc [self. i+i]. نشانه

روش token. set_morph

تجزیه و تحلیل مورفولوژیکی را از یک رشته ud feats ، مقدار هش یک رشته ud feats ، ویژگی های دیکته یا مورفانالیز تنظیم کنید. از هیچ مقدار نمی توان برای تنظیم مجدد مورف به حالت UNSET استفاده کرد.

مثال

نام شرح
امکانات ویژگی های مورفولوژیکی برای تنظیم. اتحادیه [Int ، Dict ، Str ، Morphanalysis ، هیچکدام]

token. has_morph

بررسی کنید که آیا این نشانه اطلاعات MORPH را حاشیه نویسی کرده است یا خیر. هنگامی که حاشیه نویسی مورف غیرقانونی/گمشده است ، نادرست را برگردانید.

 

نام شرح
بازگشت آیا حاشیه نویسی مورف تعیین شده است. بول

token. is_ancestor روش به مدل نیاز دارد

بررسی کنید که آیا این نشانه والدین ، پدربزرگ و مادربزرگ و غیره از دیگری در درخت وابستگی است.

مثال

نام شرح
نسل نشانه دیگرینشانه
بازگشت این که آیا این نشانه اجداد نوادگان است. بول

Token. Ancestors مدل نیاز به مدل

دنباله ای از اجداد نحوی توکن (والدین ، پدربزرگ و مادربزرگ و غیره).

مثال

نام شرح
بازده - محصول دنباله ای از نشانه های اجداد به گونه ای که Ancestor. is_ancestor (خود). نشانه

token. conjuncts مدل نیاز به مدل

یک توکن های هماهنگ ، از جمله خود نشانه نیست.

مثال

نام شرح
بازگشت نشانه های هماهنگ. Tuple [Token ،…]

Token. Children

دنباله ای از کودکان نحوی فوری توکن.

مثال

نام شرح
بازده - محصول کودک به گونه ای که کودک. نشانه

token. lefts مدل نیاز به مدل

فرزندان فوری چپ کلمه در تجزیه وابستگی نحوی.

مثال

نام شرح
بازده - محصول یک کودک چپ از نشانه. نشانه

Token. Rights مدل نیاز به مدل دارد

فرزندان فوری سمت راست کلمه در تجزیه وابستگی نحوی.

مثال

نام شرح
بازده - محصول یک کودک راست از نشانه. نشانه

token. n_lefts مدل نیاز به مدل

تعداد فرزندان فوری چپ کلمه در تجزیه وابستگی نحوی.

مثال

نام شرح
بازگشت تعداد نشانه های کودک چپ. در نظر گرفتن

token. n_rights مدل نیاز به مدل

تعداد فرزندان فوری به سمت راست کلمه در تجزیه وابستگی نحوی.

مثال

نام شرح
بازگشت تعداد نشانه های کودک راست. در نظر گرفتن

Token. Subtree Property Need Need Model

دنباله ای حاوی توکن و همه فرزندان نحوی توکن.

مثال

نام شرح
بازده - محصول نشانه ای از فرزندان به گونه ای که خود. نشانه

token. has_veector نیاز به مدل

یک مقدار بولی که نشان می دهد آیا یک بردار کلمه با نشانه همراه است یا خیر.

مثال

نام شرح
بازگشت این که آیا توکن دارای داده های بردار است. بول

Token. Vector Properties به مدل نیاز دارد

یک نمای واقعی با ارزش واقعی.

مثال

نام شرح
بازگشت یک آرایه 1 بعدی که نمایانگر بردار توکن است. numpy. ndarray [ndim = 1 ، dtype = float32]

token. veector_norm به ویژگی نیاز به مدل

هنجار L2 نمایندگی وکتور توکن.

مثال

نام شرح
بازگشت هنجار L2 نمایندگی بردار. شناور

ویژگی های

نام شرح
مدافع سند والدینمدافع
Lex V 3. 0 لکسم زیرین. لکسمی
ارسال شد جمله ای که این نشانه بخشی از آن است. طول
متن محتوای متن کلامی. str
text_with_ws محتوای متن ، با شخصیت فضایی در صورت وجود. str
فضای سفید_ در صورت وجود شخصیت فضایی را دنبال کنید. str
همت شناسه محتوای متن کلمه. در نظر گرفتن
orth_ محتوای متن کلمه ای (یکسان با token. text). بیشتر برای سازگاری با سایر ویژگی ها وجود دارد. str
واژگانی شیء واژگان دکتر والدین. واژگانی
تنشور قطعه توکن از تنش Doc پدر و مادر. numpy. ndarray
سر والدین نحوی یا "فرماندار" این نشانه. نشانه
چپ_ چپ ترین نشانه فرزندان نحوی این توکن. نشانه
حق_ مناسب ترین نشانه فرزندان نحوی این توکن. نشانه
i شاخص نشانه در سند والدین. در نظر گرفتن
ENT_TYPE نوع موجودیت. در نظر گرفتن
ent_type_ نوع موجودیت. str
ent_iob کد IOB از برچسب موجودیت نامگذاری شده است. 3 به این معنی است که توکن یک موجودیت را شروع می کند ، 2 به این معنی است که در خارج از یک موجودیت است ، 1 به معنای آن در داخل یک موجودیت است و 0 به معنای تنظیم هیچ برچسب موجودیت است. در نظر گرفتن
ent_iob_ کد IOB از برچسب موجودیت نامگذاری شده است."B" به این معنی است که توکن یک موجودیت را آغاز می کند ، "من" به معنای آن است که در یک موجودیت قرار دارد ، "o" به معنای خارج از یک موجودیت است ، و "" به معنای تنظیم هیچ یک از موجودیت ها نیست. str
ent_kb_id دانش پایه دانش که به موجودیت نامگذاری شده اشاره دارد ، این نشانه بخشی از آن است ، در صورت وجود. در نظر گرفتن
ent_kb_id_ دانش پایه دانش که به موجودیت نامگذاری شده اشاره دارد ، این نشانه بخشی از آن است ، در صورت وجود. str
ent_id شناسه موجودیت در صورت وجود ، نمونه ای از آن است. در حال حاضر مورد استفاده قرار نمی گیرد ، اما به طور بالقوه برای وضوح هسته. در نظر گرفتن
ent_id_ شناسه موجودیت در صورت وجود ، نمونه ای از آن است. در حال حاضر مورد استفاده قرار نمی گیرد ، اما به طور بالقوه برای وضوح هسته. str
لیما شکل پایه نشانه ، بدون پسوندهای تورم. در نظر گرفتن
lemma_ شکل پایه نشانه ، بدون پسوندهای تورم. str
هنجار هنجار توکن ، یعنی یک شکل عادی از متن توکن. می توان در استثنائات توکینر زبان تنظیم کرد. در نظر گرفتن
هنجار_ هنجار توکن ، یعنی یک شکل عادی از متن توکن. می توان در استثنائات توکینر زبان تنظیم کرد. str
پایین شکل کوچک نشانه. در نظر گرفتن
پایین شکل کوچک متن توکن. معادل token. text. lower (). str
شکل برای نشان دادن ویژگی های ارتوگرافی ، رشته Token را تبدیل کنید. شخصیت های الفبایی با X یا X جایگزین می شوند و شخصیت های عددی توسط D جایگزین می شوند و توالی های یک شخصیت یکسان پس از طول 4 کوتاه می شوند. به عنوان مثال ، "XXXX" یا "DD". در نظر گرفتن
شکل_ برای نشان دادن ویژگی های ارتوگرافی ، رشته Token را تبدیل کنید. شخصیت های الفبایی با X یا X جایگزین می شوند و شخصیت های عددی توسط D جایگزین می شوند و توالی های یک شخصیت یکسان پس از طول 4 کوتاه می شوند. به عنوان مثال ، "XXXX" یا "DD". str
پیشوند مقدار هش از یک بستر طول n از ابتدای نشانه. پیش فرض به n = 1. در نظر گرفتن
پیشوند_ یک بستر طول N از ابتدای نشانه. پیش فرض به n = 1. str
پسوند مقدار هش از یک بستر طول n از انتهای نشانه. پیش فرض به n = 3. در نظر گرفتن
پسوند_ زیرستانهای طول n از انتهای نشانه. پیش فرض به n = 3. str
is_alpha آیا این نشانه از شخصیت های الفبایی تشکیل شده است؟معادل token. text. isalpha (). بول
is_ascii آیا توکن از شخصیت های ASCII تشکیل شده است؟معادل همه (ORD (C)<128 for c in token.text) . bool
is_digit آیا توکن از رقم تشکیل شده است؟معادل token. text. isdigit (). بول
پایین تر است آیا توکن در حروف کوچک است؟معادل token. text. islower (). بول
is_upper آیا توکن در حروف بزرگ است؟معادل token. text. isupper (). بول
is_title آیا نشانه در تیتلکاز است؟معادل token. text. istitle (). بول
is_punct آیا نگارشی توکن است؟بول
is_left_punct آیا نشانه نگارشی سمت چپ است ، به عنوان مثال"("؟ bool
is_right_punct آیا نشانه نگارشی مناسب است ، به عنوان مثال")"؟بول
is_sent_start آیا نشانه یک جمله را شروع می کند؟اگر ناشناخته باشد ، بول یا هیچ کدام. پیش فرض برای اولین نشانه در Doc.
is_sent_end آیا توکن به یک جمله پایان می یابد؟اگر ناشناخته باشد ، بول یا هیچ کدام.
فضای_ آیا توکن از شخصیت های فضای سفید تشکیل شده است؟معادل token. text. isspace (). بول
is_bracket آیا توکن یک براکت است؟بول
is_quote آیا نشانه یک علامت نقل قول است؟بول
is_currency آیا نشانه نماد ارز است؟بول
مانند_ورل آیا نشانه شبیه URL است؟بول
مانند_نه آیا توکن یک عدد را نشان می دهد؟به عنوان مثال،"10. 9" ، "10" ، "ده" ، و غیره
مانند_یمیل آیا این نشانه شبیه آدرس ایمیل است؟بول
is_oov آیا توکن خارج از فوکوس (یعنی آیا وکتور کلمه ای ندارد)؟بول
is_stop آیا بخشی از "لیست توقف" است؟بول
پید قسمت گفتار درشت دانه از مجموعه برچسب جهانی POS. در نظر گرفتن
pos_ قسمت گفتار درشت دانه از مجموعه برچسب جهانی POS. str
نشان جزئی از گفتار ریز دانه. در نظر گرفتن
tag_ جزئی از گفتار ریز دانه. str
Morph V 3. 0 تحلیل مورفولوژیکی. مورفان تجزیه و تحلیل
دنباله رابطه وابستگی نحوی. در نظر گرفتن
dep_ رابطه وابستگی نحوی. str
لنگ زبان واژگان سند والدین. در نظر گرفتن
لانگ_ زبان واژگان سند والدین. str
چیز برآورد احتمال ورود به سیستم از نوع کلمه توکن (ورود مستقل از متن در واژگان). شناور
بت جبران شخصیت توکن در سند والدین. در نظر گرفتن
احساسات یک مقدار مقیاس که نشانگر مثبت بودن یا منفی بودن نشانه است. شناور
lex_id شناسه متوالی از نوع واژگانی توکن ، که برای فهرست بندی جداول استفاده می شود ، به عنوان مثالبرای بردارهای کلمه ای. در نظر گرفتن
درجه شناسه متوالی از نوع واژگانی توکن ، که برای فهرست بندی جداول استفاده می شود ، به عنوان مثالبرای بردارهای کلمه ای. در نظر گرفتن
خوشه شناسه خوشه قهوه ای. در نظر گرفتن
_ فضای کاربر برای افزودن برنامه های افزودنی ویژگی های سفارشی. زیرک
  • فحش
  • استفاده
  • مدل ها
  • مرجع API
  • دوره آنلاین
  • راه حل های سفارشی
  • انجمن
  • کائنات
  • بحث های GitHub
  • ردیاب مسئله
  • سرریز پشته
  • وصل کردن
  • توییتر
  • گیتوب
  • یوتیوب
  • وبلاگ
  • در حلقه بمانید!
  • به روزرسانی های مربوط به نسخه های جدید ، آموزش ها و موارد دیگر را دریافت کنید.
مبانی اسکالپینگ...
ما را در سایت مبانی اسکالپینگ دنبال می کنید

برچسب : نویسنده : سید مهدی گلابی بازدید : <-PostHit-> تاريخ : دوشنبه 5 تير 1402 ساعت: 0:51

آرشیو مطالب

پيوندهای روزانه

لینک دوستان

خبرنامه