Python4Finance

آینده علم داده و تحول دیجیتال کجاست؟
یکی از سوالاتی که خیلی از عزیزان از من می پرسند این است که برای کار در حیطه علم داده که زیربنای تحول دیجیتال است چه آینده ای را متصور هستید؟
برای پاسخ به این سوال گزارش آژانس ملی علوم استرالیا از مگاترندها در سال 2022 را خدمت شما ارسال می کنم.
در بخش Diving into digital موارد جالبی در خصوص دورکاری، سازمان های داده محور، Industry4 ، کریپتوکارنسی و ... ذکر شده است.
گزارش بسیار خلاصه است و مطالعه آن بسیار جذاب خواهد بود. همچنین منابع هر بخش در انتهای گزارش ذکر شده است.

#گزارش

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

ایجاد دیتاست های فرضی با sklearn
یکی از مهمترین نیازمندهای دانشجویان علم داده، دسترسی به دیتاست های مناسب است. البته سایت های زیادی هستند که دیتاست های بسیار خوبی را به تفکیک موضوع قرار داده اند که برخی از آنها را قبلا در کانال معرفی کرده بودم. نکته دیگر اینکه در فضای اقتصاد و مالی حجم داده های واقعی برای کار بسیار زیاد است و کمتر به داده های فرضی نیاز نیاز داریم.
اما به هر حال گاهی نیازمند داده هایی برای آزمون مدلهای مختلف هستیم. در کتابخانه sklearn تعدادی دیتاست از قبل در ماژول تعبیه شده است که در بخش sklearn.datasets در دسترس است. همچنین می توانید با استفاده از Samples generator ها می توانید دیتاست های خود را ایجاد کنید.
در تصویر این پست با استفاده از make_regression ، دو سری داده برای محاسبه رگرسیون ایجاد و رسم می شود.
#make_regression
#sklearn
#samples_generator

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

دانلود کتاب «پیش پردازش داده‌ها در پایتون» به انگلیسی «Hands-On Data Preprocessing in Python»


#معرفی_کتاب
#تمیز_کردن_داده
#پیش_پردازش_داده
#پایتون_مالی

#Python

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

معرفی کتاب «پیش پردازش داده‌ها در پایتون» به انگلیسی «Hands-On Data Preprocessing in Python»

یک ضرب المثل معروف بین متخصصین علم داده وجود دارد که می گوید "garbage in, garbage out". در واقع اهمیت داده های خوب برای نتیجه گیری صحیح بر کسی پوشیده نیست، از این رو در خیلی از اوقات شاید تا 90% کارها، به بخش پیش آماده سازی و تمیزکردن داده ها اختصاص می یابد.
پیش پردازش داده ها اولین گام در مصورسازی داده ها، تجزیه و تحلیل داده ها و یادگیری ماشین است که در آن داده ها برای عملکردهای تجزیه و تحلیل آماده می شوند تا بهترین بینش ممکن را به دست آورند.
این کتاب شما را با تکنیک های بهینه پیش پردازش داده ها از منظر های مختلف مجهز می کند.
لازم به ذکر است این کتاب توسط دکتر جعفری، استادیار دانشگاه Redlands نوشته شده است و توسط انتشارات Packt منتشر شده است.

#معرفی_کتاب
#تمیز_کردن_داده
#پیش_پردازش_داده
#پایتون_مالی

#Python

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

سوالات متداول (به روزشده در 1401/01/14)

از آنجایی که خیلی از عزیزان در خصوصی سوالات زیر را پرسیده اند و این سوالات قبلا در کانال پاسخ داده شده است، من عناوین سوالات و پاسخ آنها را جهت مرور خدمت شما قرار می دهم.

🔸چرا پایتون یاد بگیرم؟
پاسخ
🔸بهترین منابع زبان اصلی برای یادگیری پایتون کدام است؟
پاسخ
🔸چگونه میزان برنامه نویسی خود را با چالش های مختلف محک بزنم؟
پاسخ
🔸 آموزش پایتون مقدماتی در کانال
#مقدمات
🔸سوالاتمان در خصوص پایتون را از کجا بپرسیم؟
پاسخ
🔸پایتون برای چه رشته هایی مناسب است؟
پاسخ
🔸مسیر یادگیری را ترسیم نمایید.
پاسخ
🔸متوسط درآمد یک مدلساز مالی چقدر است؟
پاسخ
🔸کاربردهای مدلسازی مالی چیست؟
پاسخ
🔸مسیر توسعه مدل چیست؟؟
پاسخ
🔸یادگیری ماشین چیست و کاربرد آن در مالی چگونه است؟
تعریف
الگوریتم های یادگیری ماشین
مفاهیم یادگیری ماشین
🔸پایتون یا اکسل، کدام بهتر است؟
پاسخ
🔸پایتون یا R ، کدام یک را یاد بگیرم؟
پاسخ
🔸آیا پایتون جایگزین MQL می شود؟
پاسخ
استفاده از اطلاعات متاتریدر در پایتون
استفاده از پایتون در متاتریدر
🔸خروجی پایتون چیست؟ (پایتون در کجا اجرا می شود؟)
پاسخ
🔸میزان استفاده از پایتون در حیطه های مختلف چگونه است؟
لینک
🔸پایتون برای اقتصاد سنجی مناسب است؟
پاسخ
🔸آیا امکان رسم نمودارهای کندل با پایتون وجود دارد؟
پاسخ
🔸آیا پایتون برای هوش تجاری مناسب است؟
پاسخ
🔸آیا روش های معاملات الگوریتمی همان روش های تحلیل تکنیکال است؟
پاسخ
🔸آیا در ایران امکان معاملات الگورتیمی وجود دارد؟
پاسخ
نامه رئیس سازمان بورس در خصوص معاملات الگوریتمی
🔸دریافت اطلاعات نفت خام و ارزهای دیجیتال (رمز ارز)، ارزهای خارجی
1-نفت خام ، 2-ارز دیجیتال ، 3-رمز ارز و ارزهای خارجی در تایم فریم های کوتاه ، 4-قیمت رمز ارزها فقط با استفاده از Yahoo Finance
🔸چه موضوعاتی را برای پایان نامه و رساله خود انتخاب کنم؟
پاسخ1 . پاسخ 2
🔸از کدام IDE برای برنامه نویسی پایتون استفاده کنم؟
پاسخ
🔸مسیر تبدیل شدن به یک دانشمند علم داده در حیطه مالی و اقتصاد
پاسخ
🔸دریافت اطلاعات از TSETMC (بورس ایران)
پاسخ
🔸راه آسان دریافت اطلاعات از بورس تهران چیست؟ (ماژول دریافت اطلاعات از بورس تهران)
ماژول TseModule5
🔸کانال آپارت جهت مشاهده وبینارهای «مرور کتاب معاملات الگوریتمی»، «علم داده» و «یادگیری ماشین» و «جادوی سری های زمانی»، «کار با jupyter و زبان مارک دان» ، «خودکار سازی فرآیندها» و ...
لینک
🔸فیلم آموزشی «دریافت اطلاعات بورس ایران با پایتون کتابخانه pandas»
لینک
🔸مشاهده کتاب های معرفی شده در کانال
#معرفی_کتاب
🔸مشاهده اسلایدهای آموزشی ارائه شده در کانال
#اسلاید


🔸✅✅✅ چگونه از برگزاری دوره ها مطلع شوم؟ (پیش ثبت نام در دوره های آموزشی سال 1401)
توضیح: برای مشاهده نمونه دوره ها می توانید به کانال آپارات مراجعه فرمایید. با پرکردن این فرم در زمان برگزاری رویداد ها (کلاس ها و وبینارها) از طریق پیامک یا ایمیل به شما اطلاع رسانی خواهد شد.

#پایتون_مالی
#پاسخ_سوالات
#FAQ
عضویت در کانال 👇👇👇

تلگرام t.me/python4finance
بله (آرشیو کانال) ble.ir/python4finance
اینستاگرام: instagram.com/python4financeacademy

آشنایی با رگرسیون Theil-Sen

کد مربوط به پست بالا تقدیم می گردد.

#رگرسیون
#داده_پرت
#OLS
#Theil_Sen
#Outlier
✅عضویت در کانال پایتون برای مالی
t.me/python4finance

آشنایی با رگرسیون Theil-Sen
یکی از مسائلی که در رگرسیون به روش حداقل مربعات معمولی یا همان OLS خودمان وجود دارد، تاثیر پذیری از دادهای پرت است. به طوری یک وجود داده های پرت به شدت در نتیجه مدل تاثیر مخرب می گذارد. یکی از راهکارهای حل این موضوع استفاده از تخمین زن Theil-Sen است. در این روش تا حد زیادی تاثیر مخرب داده های پرت حذف می شود.
در مثال این پست 2 سری داده در نظر گرفته شده است که دیتاست دوم مانند دیتاست1 است ولی چند داده پرت در آن در نظر گرفته شده است.
تفاوت خط تخمینی توسط OLS و Theil-Sen در دو سری داده کاملا مشخص است.
از آنجایی که کدهای این پست طولانی شد، آن را در پست بعدی به صورت مجزا قرار خواهم داد.

#رگرسیون
#داده_پرت
#OLS
#Theil_Sen
#Outlier
✅عضویت در کانال پایتون برای مالی
t.me/python4finance

یک مثال عملی برای بک تست با ffn
قبلا در این پست در خصوص ماژول ffn صحبت کردیم. اگر پیش از این وبینارهای کتاب معاملات الگوریتمی را دنبال کرده باشید احتمالا علاقه مند به انجام یک مثال عملی با ffn هستید. در این ویدئو یک مثال در خصوص تحلیل سهم با استفاده از ffn بررسی خواهد شد.

➖ برای مشاهده ویدئو اینجا کیک کنید

#پایتون_مالی
#بک_تست
#معاملات_الگوریتمی
#Algorithmic_Trading
#ffn

پایتون برای مالی در تلگرام
https://t.me/joinchat/AAAAAFGMkouqbsb86Vfzug

عید سعید غدیر خم مبارک.
@python4finance

اسنورکل (Snorkel) چیست؟
یکی از ویژگی های سیستم های امروزی، تولید و نگهداری حجم بالای اطلاعات است. ویژگی این داده ها، سرعت بالای ایجاد شدن آنها و سرعت بالای بلااستفاده شدن آنهاست!
برای مثال حسگری را در نظر بگیرید که در هر دقیقه صدها رکورد مربوط به وضعیت جغرافیایی و دمای یک محموله را ثبت می کند ولی این اطلاعات تنها زمان کوتاهی بعد از آن، بلا استفاده شده و هیچگاه به آنها رجوع نمی شود. یا مثلا داده های خرید مشتریان از یک فروشگاه زنجیره ای و ... .
به داده هایی که توسط سازمان ها ثبت می شوند ولی از آنها در فرآیند جاری سازمان استفاده نمی شود داده تاریک (Dark Data) گفته می شود. این داده ها علی رغم اینکه می توانند منابع خوبی برای تحلیل آتی باشند، به دلیل هزینه مالی و زمانی بسیار بالا برای برچسب گذاری، در مدلسازی نادیده گرفته می شوند. برای رفع این مشکل از snorkeling استفاده می شود. snorkel سیستمی است که فرآیند ساخت و مدیریت مجموعه داده های آموزشی را بدون برچسب گذاری دستی تسهیل می کند. به عبارت دیگر با ساخت توابعی، فرآیند برچسب گذاری توسط سیستم انجام می شود. snorkeling در تحلیل داده هایی که تنوع زیادی دارند بسیار راهگشا است و به این روش برچسب گذاری به جای انسان، توسط ماشین انجام می شود.
این روزها Snorkel سروصدای زیادی در یادگیری ماشین ایجاد کرده است و بد نیست سری به منابع دست اول آن بزنید.

#Snorkel
✅عضویت در کانال پایتون برای مالی
t.me/python4finance

اسنورکل (Snorkel) چیست؟

این روزها Snorkel سروصدای زیادی در یادگیری ماشین ایجاد کرده است، در پست بعدی به توضیح مختصری راجع به آن خواهیم پرداخت.

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

کارگاه رایگان «معاملات خودکار در متاتریدر 5 با پایتون»
متاتریدر یکی از بهترین پلتفرم‌های معاملاتی است و اتصال آن با پایتون ترکیب بی نظیری را برای معاملات الگوریتمی ایجاد می‌کند.
قصد دارم در اواخر مردادماه (البته ان شاء الله) دو جلسه کارگاه برای علاقه مندان این حوزه برگزار کنم. این کارگاه خصوصا برای کسانی که دنبال اجرای استراتژی های خود در محیط واقعی هستند جذاب خواهد بود.
➖ برای استفاده بهتر از این کارگاه حتما باید با مفاهیم پایتون و مدلسازی مالی (در سطح مقدماتی) آشنا باشید.
➖ به علت محدود بودن ظرفیت، اولویت حضور با افرادی است که زودتر ثبت نام کرده باشند.
➖ زمان دقیق کارگاه یک هفته قبل از شروع، از طریق ایمیل و پیامک به اطلاع ثبت نام کنندگان رسانده خواهد شد.

👈 لینک ثبت نام در کارگاه رایگان «معاملات خودکار در متاتریدر 5 با پایتون»

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

دانلود کتاب «چالش های پایتون، 100 تمرین برنامه نویسی اثبات شده که برای آماده کردن شما برای هر انجام کاری طراحی شده اند» به انگلیسی «Python Challenges, 100 Proven Programming Tasks Designed to Prepare You for Anythin»


#معرفی_کتاب
#پایتون_عمومی
#پایتون_مالی

#Python

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

معرفی کتاب «چالش های پایتون، 100 تمرین برنامه نویسی اثبات شده که برای آماده کردن شما برای هر انجام کاری طراحی شده اند» به انگلیسی «Python Challenges, 100 Proven Programming Tasks Designed to Prepare You for Anythin»

مدت زیادی بود که کتاب آموزشی عمومی پایتون در کانال معرفی نکرده بودم. این کتاب یکی از کتاب های بسیار خوب برای یادگیری پایتون با مثال های کاربردی است که هم برای کاربران جدید و هم کاربران قدیمی پایتون بسیار مفید و کاربردی است.



#معرفی_کتاب
#پایتون_عمومی
#پایتون_مالی

#Python

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

در صورتی که برای دسترسی به کانال پایتون برای مالی در تلگرام دچار مشکل هستید می توانید از صفجه اینستاگرام و بله کانال نیز استفاده بفرمایید.

🔸اینستاگرام:
لینک
🔸بله:
لینک

نمودار جعبه ای (Boxplot) یک نمودار بسیار خوب برای کارهای آماری
یکی از خصوصیات متخصصین علم داده، توجه به داده هاست. شناخت داده و به اصلاح پیدا کردن شم شناخت داده ها، برای انتخاب مدل صحیح بسیار حائز اهمیت است.
یکی از نمودارهای بسیار خوب برای شناخت داده ها، نمودار جعبه ای است.
این نمودار؛ مقادیر حداقل، حداکثر، چارک اول و چارک سوم، میانه و حتی داده های پرت را هم نمایش می دهد و به راحتی می توانید میزان تمرکز داده ها و چولگی آنها را مشاهده کنید.
در تصویر این پست داده های مربوط به دو سهم بین المللی به کمک نمودار جعبه ای رسم می شود.

#آمار
#نمودار_جعبه_ای
#پایتون_مالی

#box_plot

✅عضویت در کانال پایتون برای مالی
t.me/python4finance

آیا علم داده مالی داریم؟
برای پاسخ به این سوال، ابتدا زیر بنای علم داده را با هم بررسی کنیم:
1-علوم کامپیوتر: بدیهی است که اصولا علم داده به دلیل گسترش دانش کامپیوتر و توانایی انجام محاسبات گسترده و حل معادلات پیچیده توسط رایانه ها توسعه پیدا کرده است.
2-ریاضیات و آمار: زیر بنای تحلیل علمی مسائل، آمار و ریاضیات است. اگر چه نگاه ما در علم داده با نگاه سنتی به آمار متفاوت است اما به هر حال زیربنای ریاضیاتی و آماری قابلیت اتکای نتایج را به شدت افزایش می دهد.
3-تخصص در یک کسب و کار: بدون شناخت یک کسب و کار تحلیل های ما، تحلیل های کاربردی نبوده و صرفا تشخیص یکسری روابط بین متغیرهای مربوط و نامربوط است.
جمع بندی:
علوم کامپیوتر+ریاضیات و آمار = یادگیری ماشین
علوم کامپیوتر+شناخت کسب وکار= توسعه نرم افزارهای سنتی
ریاضی و آمار+شناخت کسب وکار= تحلیل داده
علوم کامپیوتر+ریاضیات و آمار+شناخت کسب وکار = علم داده

پس به طور کلی در علم داده، شناخت کسب و کار و استفاده از دانش آن جزء لاینفک کار است. بنابراین اگر فردی صرفا ریاضیات و آمار و دانش کامپیوتر را مسلط باشد، دانشمند داده نیست بلکه تحلیل گر داده است.
🆔 @python4finance

میلاد با سعادت شمس الشموس، انیس النفوس، سلطان طوس حضرت علی ابن موسی الرضا(ع) بر شما مبارک.

پایتون برای مالی
🆔 @python4finance

دانلود کتاب «یادگیری عمیق برای مالی، به کارگیری تکنیکها و الگوریتم های یادگیری عمیق برای ایجاد استراتژی های قدرتمند معاملاتی» به انگلیسی «Hands-On Deep Learning for Finance , Implement deep learning techniques and algorithms to create powerful trading strategies »


#معرفی_کتاب
#یادگیری_عمیق
#مالی_کمی
#پایتون_مالی

#deep_learning
#trading_strategies

✅عضویت در کانال پایتون برای مالی
t.me/python4finance