NEW BOT Телеграм, страница

Data Science

کتاب آپاچی Storm انتشارات Packt

@dataanalysis

2.34K views12:15

Data Science

Packt.Learning.Storm.Aug.2014.ISBN.1783981326.pdf

2.3 MB

2.54K views12:17

Data Science

Forwarded from Elasticsearch

الستیک سرچ (Elasticsearch) یک موتور جستجو توزیع شده متن باز است که برای ذخیره، جستجو و تحلیل داده های حجیم، با قابلیت اعتماد بالا و مدیریت آسان طراحی شده است. از مهمترین جنبه های این ابزار قدرتمند سرعت در جستجو داده و انعطاف پذیری در تحلیل داده توسط زبان قدرتمند پرس و جو آن می باشد.
این قابلیت ها کاربران را قادر می سازد که بر روی داده های حجیم بدون ساختار، نیمه ساخت یافته و سری زمانی به صورت برخط جستجو و تحلیل انجام دهند و Elasticsearch را به ابزاری ایده آل برای ذخیره و تحلیل آنی داده ها تبدیل کرده است.
در حال حاضر شرکت های بزرگی همچون Uber, Facebook, Stackoverflow, Github و هزاران شرکت دیگر به صورت فزاینده از این تکنولوژی استفاده می کنند.
@elasticsearch_ir

131 views17:20

Data Science

Big data Stack for Data Science

@dataanalysis

1.93K views10:53

Data Science

نکات و برخی راه حل های سوالات مسابقات داده کاوی کشوری( فن آورد):
با توجه به درخواست های متعدد صورت پذیرفته توسط علاقه مندان حوزه داده کاوی و وجود نکات مفید در سوالات مطرح شده در مرحله غیر حضوری مسابقات داده کاوی کشور برخی نکات در ادامه بیان می گردد.

سوال پیش بینی قیمت طلا:
اطلاعات این سوالات براساس میزان خرید و فروش طلا به ازای مغازه های طلافروشی متعدد در روزهای گوناگون بود و در انتها خواسته گردیده بود که قیمت طلا براساس میزان خرید و فروش را در برخی از روزها پیش بینی گردد.
راه حل اصلی این سوال با توجه به اینکه رابطه میان دو متغیر به یک متغیر کمی را خواسته است روش رگرسیون می باشد. در صورتی تنها مقدار قیمت طلا در روزهای مختلف خواسته میشد روش های Time Series نیز کارایی خوبی خواهند داشت.

سوال شناسایی گروه ها در شبکه ارتباطی:
این سوال جز سوال های تخصصی حوزه تحلیل شبکه اجتماعی می باشد که در این دوره مسابقات مطرح گردید. برای پاسخ به این سوال می توان از الگوریتم های Community detection که براساس معیارهای Modularity و... گروه های دوستی را شناسایی می کنند استفاده کرد. الگوریتم های مختلفی در پلتفرم ها و زبان های برنامه نویسی متنوع جهت پاسخ به این سوال وجود دارد.

سوال شناسایی تقلب بانکی:
این سوال با الگوریتم های Classification قابلیت پاسخگویی خواهد داشت. یکی از نکته های اصلی این سوال عدم توازن اطلاعات در کلاس متغیر هدف بود که میبایست در گام پیش پردازش اطلاعات متوازن می گردید یا از الگوریتم هایی استفاده گردد که توانایی مدیریت اطلاعات غیزمتوازن را داشته باشند.

سوال چهار: شناسایی شهر و استان های کشور براساس اطلاعات دستگاه های بانکی: این سوال قطعا پیچیده ترین و مبهم ترین سوال مرحله غیر حضوری این مسابقات می باشد که روش های پیشنهادی بسیار متنوعی برای پاسخ آن وجود دارد و بعضا می توان با روش هایی غیر از داده کاوی به این سوال پاسخ داد.
یکی از روش ها استفاده از روش های مبتنی بر قاعده و Rule می باشد. روش دوم استفاده از الگوریتم خوشه بندی سلسله مراتبی می باشد که باتوجه به اینکه متغیرهای غیر کمی نیز در میان داده ها وجود داشت می بایست از الگوریتم خوشه بندی Two Step استفاده گردد. روش سوم استفاده از الگوریتم های قوانین انجمنی می باشد که براساس مشتری، دستگاه خودپرداز قوانین با هم نمایی استخراج گردد و خروجی آن دستگاه های بانکی می باشد که با یکدیگر ارتباط داشته اند. در انتها می توان در میان این دستگاه های بانکی الگوریتم های تحلیل شبکه و Community detection را اجرا کرد تا دستگاه های مشابه شناسایی گردد.

البته قطعا راه حل های متنوعی دیگر نیز برای حل این سوالات وجود دارد.
در انتها یکی از تجربه های مفید شرکت در این مسابقات کار با اطلاعات غیر تمیز بود. گام پیش پردازش اطلاعات در تمامی این ۴ مسئله نقش کلیدی داشته اند.

ارادتمند
محمدرضا محتاط

4.79K views19:21

Data Science

دوره رایگاه یادگیری ژرف برای کدنویسها
http://www.kdnuggets.com/2016/12/deep-learning-coders-mooc-jeremy-howard.html

4.96K views04:15

Data Science

Big Data Trends

@dataanalysis

2.11K views08:38

Data Science

Text Mining Methods

@dataanalysis

2.01K views19:11

Data Science

Forwarded from رویدادهای ملی و بین المللی

سلسله نشست های علم اطلاعات و دانش شناسی
#Seminar #Free #Live
#Data_Science
#Iran #1395 #10
www.hepl.ir
@convent

75 views12:08

Data Science

آژور در صدر مه داده ها

@dataanalysis

3.82K viewsedited 05:12

Data Science

الگوریتم های پر استفاده توسط متخصصین علم داده

@dataanalysis

7.76K viewsedited 05:16

Data Science

گروه تخصصی Data Science & Big Data در شبکه اجتماعی LinkedIn:
با توجه به ماهیت تخصصی شبکه اجتماعی لینکدین، ماندگاری مباحث علمی مطرح شده در این شبکه اجتماعی برای علاقه مندان و آشنایی بیشتر متخصصین این حوزه با یکدیگر، گروه علم داده و کلان داده در شبکه اجتماعی لینکدین ایجاد گردیده است.
علاقه مندان می توانند از طریق لینک زیر به عضویت گروه درآیند.
موضوعات مورد بحث در این گروه شامل موارد ذیل خواهد بود.
Data Science
Big Data Technology
Data Mining Methods
.....

https://www.linkedin.com/groups/Data-Science-Big-Data-Analytics-10329368/about

3.16K views09:48

Data Science

مسیر تبدیل شدن به عالم داده
1- یادگیری مفاهیم آماری
2-برنامه نویسی
اس کیو ال، پایتون، ...
3- یادگیری ماشین
4-تولباکس مه داده

http://www.datasciencecentral.com/profiles/blogs/the-new-rules-for-becoming-a-data-scientist
https://telegram.me/dataanalysis
https://telegram.me/dataanalysis

Data Science Central

The New Rules for Becoming a Data Scientist

Summary: What do you need to do to get an entry level job in data science? This article is written for anyone who is considering becoming a data scientist. That includes young people just starting their bachelor’s degrees and folks in the first two or three…

2.86K viewsedited 08:29

Data Science

مثالی از ترکیب تکنولوژی ها

2.56K views10:25

Data Science

تفاوت بین یادگیری ماشین، هوش مصنوعی، آمار، علم داده ها و یادگیری ژرف
http://www.datasciencecentral.com/profiles/blogs/difference-between-machine-learning-data-science-ai-deep-learning
https://telegram.me/dataanalysis