Data Science

حوزه‌های تحقیقاتی مرتبط با هوش مصنوعی

@dataanalysis

5 مزیت استفاده از هدوپ کاهش هزینه، قدرت محاسباتی، مقیاس پذیری، قدرت انعطاف، تقویت حفاظت از داده در پشتیبان گیری .https://t.me/AryaVisions

تفاوت اسپارک و https://t.me/AryaVisions Map Reduce .

برای یک پروژه بانکی بر بستر کلان داده اگر از دوستان کسی تجربه کار با پلت فرم هدوپ و توانایی کار با اسپارک را دارد و علاقمند به کار هست لطفا رزومه خود را به ایمیل mn.nasiri@gmail.com ارسال کند
https://t.me/dataanalysis

بزرگترین رقابت تخصصی کشور در رشته #داده_کاوی

با بیش از 20 میلیون تومان جایزه نقدی + مزایای دیگر

آینده را شروع کن 👇
🔗 bit.ly/fanavard_contest

کد تخفیف 40% مخصوص اعضای کانال علم‌داده:
dataanalysis

برترین روش‌ها و متدهای علم‌داده مورد استفاده در پروژه‌ها!

مصورسازی داده‌ها، رگرسیون لوجستیک، معیار ارزیابی Cross Validation و درخت‌های تصمیم‌گیری جز برترین متدها می‌باشند.

@dataanalysis

سال نو رو به تمامی اساتید و متخصصین علم‌داده کشور تبریک عرض می‌نماییم!

ان‌شالله سالی همراه با موفقیت و سلامتی برای همه عزیزان و بزرگواران🙏🌺

فرصت شغلی توسعه‌دهنده سرور شرکت #تپسل

*تجربه کار یا پروژه در حوزه Big Data
*مسلط به زبان جاوا

بستر ارتباطی: Jobs@tapsell.ir

@dataanalysis

اسلایدهای ارائه اینترنت اشیا و کاربرد آن در سلامت و پزشکی
https://www.slideshare.net/mahdinasiri/iot-in-the-healthcare/mahdinasiri/iot-in-the-healthcare
https://t.me/dataanalysis
@aryavisions

Visual Spark Studio

یکی از محبوب ترین فریمورک کلان داده در امروز است. با وجودی که محبوبیت Spark به طور قابل ملاحظه ای افزایش یافته است، عدم دسترسی به استعداد Spark تاثیر بیشتری بر Spark دارد.
با توجه به چشم انداز فناوری اطلاعات به سرعت در حال تغییر، Spark خود در حال تکامل است و توسعه دهندگان و شرکت های فناوری اطلاعات می توانند چالش برانگیز برای دستیابی به سرعت آن باشند. هرچند که دسترسی آزاد منبع Spark به یک پلتفرم آسان برای آزمایش کمک می کند، منحنی و نیاز به توسعه گسترده، ادغام و تلاش تست، برای ساخت برنامه های تولید جرقه آماده است.

ویژوال اسپارک استودیو یک راه حل برای پیچیدگی های درگیر در ساخت برنامه های کاربردی کلاس Enterprise در جرقه برای هر دو حالت دسته ای و جریان است. این یک محصول سبک وزن آزاد و سریع است که هر کسی می تواند آن را دانلود و استفاده کند تا یادگیری و استفاده از جرقه خود را تسریع کند.

@aryavisions

محیط نرم افزار جدید Visual Spark Studio

@aryavisions

سیستم BI

@aryavisions

مشکلات سیستم bi

خودداری کاربران یکی از موانع بزرگ بر سر راه موفقیت BI است. مشکلات دیگر شامل ناچار شدن به غربال حجم زیادی از داده‌های نامربوط و کیفیت پایین داده‌هاست.
کلید به دست آوردن بینش دقیق از طریق سیستم BI، داده‌های استاندارد است. در هر بررسی BI، داده‌ها مهم‌ترین نقش را دارند. داده‌ها مثل آجرهایی هستند که بینش تجاری را می‌سازند. شرکت‌ها قبل از اینکه شروع به تجزیه و تحلیل کنند و بر اساس بینشی که به دست می‌آورند تصمیم‌گیری کنند، باید منابع داده‌های‌شان را به ترتیبی درست سازماندهی کنند. در غیر این صورت عملکرد آنها برپایه‌ی اطلاعات نادرستی خواهد بود.
مشکل دیگری که ممکن است با آن رو به رو شوید خودِ ابزار‌های BI هستند. هر چند این ابزارها امروزه جای بیشتری برای پیشرفت دارند و کار با آنها برای کاربران آسان‌تر از قبل شده است. هسته‌ی اصلی BI به جای آن که مدیریت روند باشد، هنوز بر پایه‌ی گزارش است؛ البته این وضعیت کم‌کم شروع به تغییر کرده‌ است. مراقب باشید مفهوم هوش کسب‌وکار را با تجزیه‌ و تحلیل تجاری اشتباه نگیرید.
سومین مانعی که بر سر راه استفاده از BI برای دگرگون کردن روند کسب و کار وجود دارد عدم شناخت بیشتر شرکت‌ها از روند کسب و کارشان است. (یا حداقل آن قدر نیست که بتواند به آنها در بهبود این روند کمک کند) شرکت‌ها باید در مورد روندی که انتخاب می‌کنند احتیاط زیادی به خرج دهند. اگر این روند تأثیر مستقیمی بر درآمد نداشته باشد یا کسب‌وکار در جهت استاندارد کردن این روند در شرکت نباشد، ممکن است کل کار BI مختل شود. شرکت‌ها باید همه‌ی فعالیت‌هایی که روند یک کسب و کار مشخص را شکل می‌دهند درک کنند، چگونگی انتقال داده در روندهای مختلف و چگونگی انتقال داده بین کاربران مختلف را درک کنند و بدانند که هر فرد چطور از آنها استفاده می‌کند تا نقش خود را در این روند ایفا کند. اگر آنها می‌خواهند از طریق BI نحوه‌ی کار افراد را بهبود ببخشند باید همه‌ی این موضوعات را قبل از شروع پروژه‌ی BI شناسایی و تحلیل کنند.


@aryavisions

پایگاه داده آپاچی کاساندرا(Apache Cassandra) چیست؟

کاساندرا یک پایگاه داده توزیع شده است. برای اینکه بدانید توزیع شدگی چیست، بهتر است درس سیستم توزیع شده چیست را مطالعه ای داده داشته باشید. این پایگاه داده برای مدیریت کلان داده یا مه داده کاربرد فراوانی دارد. کاساندرا هیچ نقطه خاص خرابی ندارد و به راحتی میتواند بر روی چندین کامپیوتر توزیع شود. این پایگاه داده توسعه پذیر خطی است و دسترس پذیری بالایی دارد. برای درک مفهوم توسعه پذیر خطی میتوانید این درس را مطالعه کنید. کاساندرا برای کار با داده های بسیار بزرگ طراحی شده است تا کاربران بتوانند این داده ها را به راحتی و با سرعت بالا دریافت کنند.در کاساندرا از معماری مستر/اسلیو استفاده نشده است. زیرا در این معماری معمولا گره (سرپرست) به دلیل کارکرد زیاد به گلوگاه سیستم تبدیل می شود. یعنی در صورتی که مستر از کار بیفتد یا کند شود، کل سیستم از کار می افتد یا کند می شود. برای همین در کاساندرا چیزی به نام مستر وجود ندارد و تمامی گره ها(کامپیوترها)ی متصل به هم، مانند یکدیگر رفتار می کنند. داده ها در گره های مختلف تکرارمی شوند. ساختار تکرار و تکثیر در آپاچی کاساندرا مانند شکل زیر است:

در درس آشنایی انواع با پایگاه داده NoSQL بحث کردیم که Cassandra از دسته Column Family Database ها است. این پایگاه داده ها که داده ها را به جای اینکه به صورت سطر به سطر مشاهده کنند، به صورت ستون به ستون مشاهده و ذخیره سازی میکنند، مناسب برای کاربردهایی مانند پردازش داده های بزرگ و BigData هستند. Cassandra از زبان پرس و جویی به نام CQL استفاده میکند که بسیار شبیه SQL است و برنامه نویسانی که میخواهند از SQL به Cassandra مهاجرت کنند، کار زیاد سختی در پیش ندارند.
@aryavisions

آریا ویژن از آپاچی کاساندرا هم استفاده می کند
@aryavisions

کتاب Predictive Analytics انتشارات Wiley

@dataanalysis

کتاب Predictive Analytics انتشارات Wiley

@dataanalysis

اینترنت اشیا و کاربرد آن در سلامت و پزشکی
https://www.aparat.com/v/BgGCc
در این ارائه نمونه کاربردهای اینترنت اشیا در سلامت و پزشکی مطرح شد و آینده اینترنت اشیا و اینترنت اشیا پزشکی در این زمینه مطرح شد. همچنین کاربرد اینترنت اشیای پزشکی و ارتباط آن با تله مدیسین در بخش دوم مطرح شد

اتصال به منابع داده مختلف در آریاویژن:

• ترکیب و پیوند بر روی پایگاه های داده مختلف
• پشتیبانی کامل از تقویم هجری شمسی
• پشتیانی کامل از دریل دان و رول آپ داده های زمانمند
• اتصال به پایگاه های داده Oracle ،Microsoft SQL Server ، MySQL ، PostgreSQL
• دسترسی به فایل های Excel ، CSV ، JSON و XML استخراج و نرمال سازی هوشمند اطلاعات از فایل های اکسل
• اتصال به سرویس آنالیز داده مایکروسافت SSAS
• تشخیص خودکار نوع داده های غیر ساخت یافته ورودی
• نمایه سازی خودکار جدول ها
• سیستم نگهداری موقت پاسخ درخواست های پر تکرار

@aryavisions

اتصال به منابع داده مختلف در آریاویژن
@aryavisions