دیتاهاب
رفتن به کانال در Telegram
موضوعات کانال: ✅Data Science ✅Machine Learning ✅Deep Learning ✅NLP گروه تلگرامی ⬅️ @data_jobs دیتاست ⬅️ @persian_data ادمین ⬅️ @data_hub
نمایش بیشتر2 110
مشترکین
اطلاعاتی وجود ندارد24 ساعت
-57 روز
-1230 روز
در حال بارگیری داده...
کانالهای مشابه
ابر برچسبها
اشارات ورودی و خروجی
---
---
---
---
---
---
جذب مشترکین
ژوئیه '26
ژوئیه '26
+10
در 0 کانالها
ژوئن '26
+21
در 0 کانالها
Get PRO
مه '26
+10
در 0 کانالها
Get PRO
آوریل '26
+8
در 0 کانالها
Get PRO
مارس '26
+4
در 0 کانالها
Get PRO
فوریه '26
+20
در 0 کانالها
Get PRO
ژانویه '26
+9
در 0 کانالها
Get PRO
دسامبر '25
+27
در 0 کانالها
Get PRO
نوامبر '25
+40
در 0 کانالها
Get PRO
اکتبر '25
+31
در 0 کانالها
Get PRO
سپتامبر '25
+18
در 0 کانالها
Get PRO
اوت '25
+42
در 1 کانالها
Get PRO
ژوئیه '25
+36
در 0 کانالها
Get PRO
ژوئن '25
+13
در 0 کانالها
Get PRO
مه '25
+49
در 2 کانالها
Get PRO
آوریل '25
+36
در 0 کانالها
Get PRO
مارس '25
+34
در 1 کانالها
Get PRO
فوریه '25
+22
در 0 کانالها
Get PRO
ژانویه '25
+37
در 1 کانالها
Get PRO
دسامبر '24
+32
در 0 کانالها
Get PRO
نوامبر '24
+34
در 0 کانالها
Get PRO
اکتبر '24
+55
در 2 کانالها
Get PRO
سپتامبر '24
+54
در 2 کانالها
Get PRO
اوت '24
+53
در 2 کانالها
Get PRO
ژوئیه '24
+35
در 1 کانالها
Get PRO
ژوئن '24
+35
در 1 کانالها
Get PRO
مه '24
+82
در 2 کانالها
Get PRO
آوریل '24
+153
در 1 کانالها
Get PRO
مارس '24
+39
در 2 کانالها
Get PRO
فوریه '24
+54
در 0 کانالها
Get PRO
ژانویه '24
+71
در 0 کانالها
Get PRO
دسامبر '23
+102
در 0 کانالها
Get PRO
نوامبر '23
+58
در 1 کانالها
Get PRO
اکتبر '23
+43
در 0 کانالها
Get PRO
سپتامبر '23
+40
در 0 کانالها
Get PRO
اوت '23
+72
در 0 کانالها
Get PRO
ژوئیه '23
+80
در 0 کانالها
Get PRO
ژوئن '23
+121
در 0 کانالها
Get PRO
مه '23
+21
در 0 کانالها
Get PRO
آوریل '23
+28
در 0 کانالها
Get PRO
مارس '23
+31
در 0 کانالها
Get PRO
فوریه '23
+110
در 0 کانالها
Get PRO
ژانویه '23
+24
در 0 کانالها
Get PRO
دسامبر '22
+59
در 0 کانالها
Get PRO
نوامبر '22
+47
در 0 کانالها
Get PRO
اکتبر '22
+39
در 0 کانالها
Get PRO
سپتامبر '22
+20
در 0 کانالها
Get PRO
اوت '22
+24
در 0 کانالها
Get PRO
ژوئیه '22
+24
در 0 کانالها
Get PRO
ژوئن '22
+60
در 0 کانالها
Get PRO
مه '22
+28
در 0 کانالها
Get PRO
آوریل '22
+37
در 0 کانالها
Get PRO
مارس '22
+115
در 0 کانالها
Get PRO
فوریه '22
+104
در 0 کانالها
Get PRO
ژانویه '22
+20
در 0 کانالها
Get PRO
دسامبر '21
+44
در 0 کانالها
Get PRO
نوامبر '21
+55
در 0 کانالها
Get PRO
اکتبر '21
+41
در 0 کانالها
Get PRO
سپتامبر '21
+38
در 0 کانالها
Get PRO
اوت '21
+63
در 0 کانالها
Get PRO
ژوئیه '21
+16
در 0 کانالها
Get PRO
ژوئن '21
+27
در 0 کانالها
Get PRO
مه '21
+51
در 0 کانالها
Get PRO
آوریل '21
+29
در 0 کانالها
Get PRO
مارس '21
+71
در 0 کانالها
Get PRO
فوریه '21
+110
در 0 کانالها
Get PRO
ژانویه '21
+56
در 0 کانالها
Get PRO
دسامبر '20
+460
در 0 کانالها
| تاریخ | رشد مشترکین | اشارات | کانالها | |
| 11 ژوئیه | +1 | |||
| 10 ژوئیه | +2 | |||
| 09 ژوئیه | 0 | |||
| 08 ژوئیه | 0 | |||
| 07 ژوئیه | 0 | |||
| 06 ژوئیه | +2 | |||
| 05 ژوئیه | 0 | |||
| 04 ژوئیه | +2 | |||
| 03 ژوئیه | +2 | |||
| 02 ژوئیه | 0 | |||
| 01 ژوئیه | +1 |
پستهای کانال
#موقت
فک کن ایدهای که به نظرت خیلی خوبه بدون چشم داشت پست میکنی
بعد یک عده دیس لایک میکنن
جرات ندارن کامنت بزارن تا هویتش مشخص بشه
عجیب که از کانال هم لفت نمیدن
تازه دیشب یک نفر روی پست قبلی کامنت گذاشته که چون اون پست گذاشتم
حروم لقمه هستم
من که صرفا کامنت پاک کردم و هیچ پاسخی بهش ندادم
ولی
عزیز دل
با افتخار کل عمرم شریف زندگی کردم و به احدی باج ندادم، مجیزگوی نهاد یا صنف خاصی هم نبودم
با افتخار بچه روستایی هستم و از صفر شروع کردم از صفر صفر صفر، پدر عزیزتر از جانم هم مدت زیادی کارگر بوده و البته همیشه روی چشمهام جا داره
امثال من هر چی درآوردم نون بازو بوده...
| 2 | یک ایده به ذهنم رسیده که به نظرم ارزش زیادی داره و اگر روش کار بشه، میتونه تبدیل به یه مقالهی خیلی خوب بشه.
شاید بپرسید اگر این ایده اینقدر خوبه، چرا خودت انجامش نمیدی؟
دو تا دلیل داره. اول اینکه خودم فعلاً فرصت انجامش رو ندارم. دوم اینکه دوست دارم یکی از شماها این ایده رو برداره، روش کار کنه، یه مقالهی خوب ازش دربیاره و نتیجهش رو هم توی یه کنفرانس خفن منتشر کنه و رزومه خوبی برای خودش بسازه.
حالا ایده چیه؟
بچههایی که با معماری Transformer آشنا هستن میدونن که یکی از مشکلات مدلهای ترنسفورمری، عملکردشون روی متنهای خیلی بلنده.
قبل از Transformer، شبکههای عصبی بازگشتی (RNN) مشکل Long-term Dependency داشتن؛ یعنی وابستگیهای بلندمدت رو خوب یاد نمیگرفتن. بعد Transformer اومد و Attention رو معرفی کرد تا این ضعف رو تا حد زیادی برطرف کنه.
اما الان یه مشکل جدید داریم.
فرض کنید از یک مدل زبانی یه گزارش ۵۰ صفحهای میخواید، یا ۲۰۰ صفحه متن بهش میدید، یا حتی ۲۰ هزار توکن ورودی. هرچقدر طول ورودی بیشتر میشه، حتی مکانیزم Attention هم دیگه نمیتونه وابستگی بین همهی کلمات رو به خوبی حفظ کنه و عملکرد مدل افت میکنه.
اینجا ایدهای که به ذهن من رسیده اینه که از مفهوم Convolution استفاده کنیم.
توی CNNها یک Kernel یا فیلتر داریم که روی ورودی حرکت میکنه. پیشنهاد من اینه که همین منطق رو برای متن استفاده کنیم، ولی به جای Kernel، از Attention استفاده کنیم.
فرض کنید یک متن ۲۰ هزار توکنی داریم. به جای اینکه Attention روی کل متن یکجا محاسبه بشه، متن رو به بخشهای کوچکتر تقسیم کنیم؛ مثلاً ۲۰ بخش هزار توکنی.
بعد مثل Convolution روی این بخشها حرکت کنیم، اما عملیاتی که انجام میدیم از جنس Attention باشه، نه Convolution.
یعنی برای هر بخش، Attention جداگانه محاسبه بشه و این فرآیند به صورت Sliding Window روی کل متن حرکت کنه.
میدونم که این روش Information Loss ایجاد میکنه و بعضی وابستگیهای دور از بین میره. مثلاً ممکنه کلمات هزار توکن اول با کلمات هزار توکن پنجم ارتباط داشته باشن و این ارتباط کامل حفظ نشه.
ولی به نظرم بخش زیادی از این ارتباطها قابل چشمپوشیه و هزینهای که بابت از دست دادن اون مقدار اطلاعات میدیم، در مقابل بهبود مقیاسپذیری ارزشش رو داره.
به نظرم ترکیب Convolution و Attention میتونه ایدهی جالبی باشه و شاید حتی راهحلی برای یکی از مشکلات مهم مدلهای زبانی امروزی باشه.
چون الان یکی از دردسرهای اصلی LLMها اینه که هرچقدر طول ورودی بیشتر میشه، بعد از یک نقطه عملکرد مدل به شکل محسوسی افت میکنه و Performance واقعاً Drop میکنه. | 398 |
| 3 | بعد از مدتها دوباره برگشتیم
درود به همگی
اول از همه وظیفه خودم میدونم اتفاقات تلخی که دیماه افتاد رو به همه تسلیت بگم. غمیه که فکر میکنم تا مدتها توی فکر و قلب خیلیهامون میمونه.
واقعیتش بعضی دردها اونقدر بزرگن که واقعاً چیزی برای گفتن پیدا نمیکنه. فقط میتونم امیدوار باشم که
امانتدار خوبی باشیم و نام و یادشون را اونجوری که شایستهشون باشه، زنده نگه داریم. | 474 |
| 4 | #موقت
اگه کسی تجربه کاری در سایت های فریلنسری مثل upwork داره لطفا یک پیام بده
mohammad_dehghaniiii | 186 |
| 5 | من طبیعتا پیشگو نیستم، و اقتصاد هم محل پیشگویی نیست ولی میشه پیش بینی کرد
اگر با همین دست و فرمون جلو رفته بشه (خصوصا محاصره دریایی ادامه داشته باشه)
مشکل شدید در پخش و توزیع بنزین - احتمالا در خرداد (بخشی از بنزین مصرفی، وارداتی هست)
ابرتورم در تابستان (احتمالا مرداد) - میشه گفت تابستان بسیار گرمی در پیش خواهیم داشت
پ.ن: الان هم ابرتورم هستیم (وقتی فقط طی یک سال، مرغ 4 برابر میشه) ولی چیزی ک میگم شبیه به F(f(x)) هست یعنی ابرتورم در ابرتورم
پ.ن 2: اصلا شرایط اقتصادی مناسب نیست (فاجعه اس) و خودمون را برای شرایط بسیار سختی آماده می کنیم و اصلا خرید اضافه و غیرضروری نمی کنیم و تصمیم های مهم زندگی را ترجیحا به تعویق می اندازیم. | 669 |
