توکنایز کردن در پایتون | Tokenization with Python

[@alikarimi01]

بسیار کاربردی بود آموزش تون

[@amirmoshkani8462]

ممنون از آموزش با ارزش شما. حداقل 10 روز کار من جلو افتاد.

[@MohammadrezaMokhtari-qh2yg]

really nice and smooth teaching! thank you.

[@amiralikhatib3650]

من کارآ؛موزی رفتم یه شرکتی پروژه nlp دادن و آموزش هاش رو خودم باید دنبال میکردم...به فارسی سرچ کرد پیج شما اومد...به بقیه دوستانم توی شرکت هم پیجتون رو معرفی کردم...دمتون گرم

[@MoritaDataLand]

سپاس فراوان🌹

[@amiralikhatib3650]

این مجموعه بهترین مجموعه nlp فارسی زبان تو یوتیوبه...واقعا عالیه

[@MoritaDataLand]

خیلی ممنون از حمایتتون

[@amirrrashidi4820]

بسیار عالی توضیح میدید 💯💯

[@siamakshams1923]

دست شما درد نکند.

[@MoritaDataLand]

ممنونم

[@ai.simplified..]

تعداد افراد فارسی زبانی که یوتیوب میبینند و دسترسی پیدا میکنند بسیار کم هست،
این ویدیو بسیار آمورشی و مفید بود،

[@MoritaDataLand]

ممنونم که نظرتونو بیان کردین

[@mortezakamrannezhad508]

ممنون بسیار مفید بود. بخصوص کتابخانه ی hazm

[@MoritaDataLand]

خوشحالم که براتون مفید بوده و ممنون از بیان نظرتون

[@hello.world91]

mesle hamishe awli

[@mstare]

best nlp tuts 💯

[@mmotahari943]

ممنون خوب و مفید بود

[@rojindarafarin5457]

عالی بود لطفا بیشتر بذارید🙂

[@Ali-iw7ix]

ممنون بابت آموزش

[@محمدامینکریمپور-ذ6ط]

سلام ممنونم خیلی عالی بود
ببخشید segmentation با tokenization چه تفاوتی داره
چون من خونده بودم که مرحله اول سگمنتیشن ولی تو کانال شما چیزی راجبش پیدا نکردم

[@ahmadkhademi2745]

عالی بود مرسی

[@karikatyr9547]

لطفاً درموردکتاب خانه که با آن بتوان اِن اِف تی را نوشت ویدئو بسازید ممکین است درکانالهای دیگر باشد اما من علاقمندم شما بسازید ممنون از توضیحات خوب تان.

[@thereaction4407]

very good tnx 👏👏👍

[@Pvfaati]

awli bood ,mamnon

[@yousef-ms6fw]

عالیه ، ادامه بدید و لطفا ببرینش به سمت بلاکچین

[@MoritaDataLand]

ممنون از نظر و پیشنهادتون

[@hhhbaashna9378]

سلام . خسته نباشید و ممنون از آموزشهاتون.به عنوان پیشنهاد حدس میزنم اگه آموزشهاتون رو در قالب یه پروژه - هر چند کوچیک - پیش ببرید خیلی از اینی که الان هست جذاب تر بشه. باز هم ممنون از آموزشهاتون..

[@MoritaDataLand]

سلام. از بیان نظرتون خیلی ممنونم. در ادامه حتما پروژه های واقعی خواهیم داشت

[@kazemifatima12]

سلام شما کلاس خصوصی هم دارید چطور میشه با شما تماس گرفت

[@seyedamirhoushangfattahpou3947]

ممنون من متن را از pdf به text تبدبل می کنم ولی در جستجو نمی توانم استفاده کنم چون از حروف فارسی مختلفی استفاده می شود.این متن های فارسی را چه طور می توان نرمالایز نمود؟ متشکرم از وقتی که می گذارید

[@MoritaDataLand]

بخش اول سوال قاطی شده متوجه نشدم شما اول
pdf رو به text
تبدیل میکنید؟

[@seyedamirhoushangfattahpou3947]

@@MoritaDataLand من متن های فارسی پی دی اف را توسط برنامه ای در پایتون به متن ورد تبدیل می کنم ولی حروف با فرمت خاصی هستند که در جستجو یافت نمی شوند می خواستم متن را به فرمت های قابل جستجو تبدیل کنم .این مشکل فقط در مورد حروف و کلمات فارسی است.اگر راهنمائی بفرمائید ممنون می شوم.

[@saraseraji3641]

سلام وقت بخیر در عالی بود ممنون میشه در مورد این خط توضیح بدید normalize=Normalize ممنون

[@fatemefazeli4119]

very good

[@sembutininverse]

سلام خسته نباشید، خواستم تشکر کنم، خیلی خیلی این موضوع زبان فارسی به کار من اومد، فقط ی سوالی، اون هم این هستش که قبل از توکنایز کردن متن همین پیش پردازش برای زبان فارسی کافیه؟، من برای پروژم یک قسمت هم با متن فارسی مواجه هستم، حقیقت اش نمی‌دونم چطور باید باهاش رفتار کنم، حالا اگر لینک سایتی یا مقاله ای یا ...، که فکر میکنید به درد کار من میخورد را ممنون میشم با من به اشتراک بزارید تا بتونم استفاده کنم، ممنونم از شما🙏🏻🙏🏻

[@MoritaDataLand]

سلام خوشحالم که براتون مفید بوده. مراحل پایه ای و اساسی همین هایی هستن که براشون ویدیو ساختم. راستش منبع فارسی معتبری سراغ ندارم ولی اگه منابع زبان انگلیسی رو بخونید میتونید توی پروژه های فارسی با کمی تغییر ازشون استفاده کنید. به زودی یک پروزه کامل رو به صورت ویدیو آموزشی به اشتراک میذارم به نظرم میتونه براتون مفید باشه