🔸🔹آشنایی با #دریاچه_داده، مقایسه آن با #انباره_داده به همراه معرفی #Delta_Lake

در نسخه جدید #Delta_Lake شاهد اضافه شدن #Hive_Connector هستیم که خبر خوبی برای مهندسان داده و متخصصین #Hive هست. از این پس می تونیم با دستور Stored By به #Delta_Table ها متصل می شویم و ازشون دیتا بخونیم.

مقاله کامل این عنوان در لینک ذیل بررسی شده است.


🌐https://bit.ly/2R8f404
🌐bigdataworld.ir
🔷@BigDataWorld_ir

تحلیل گراف در محیط توزیع شده با استفاده از Apache Spark

در این مقاله با کتابخانه کلیدی Spark GraphFrames آشنا می شیم.

با #گراف_فریم و تفاوت اون با #گراف_ایکس که دیگر ماژول تحلیل #گراف #اسپارک هست آشنا می شیم.

با زبان های #اسکالا و #پایتون چند مثال به منظور تحلیل گراف های پایه و اِعمال الگوریتم های اصلی #علم_شبکه نظیر #PagrRank حل می کنیم.

روی گرافمون به منظور پیداکردن کوتاه ترین مسیر #BFS می زنیم و فیلترهای مدنظرمون رو پیاده می کنیم.

می تونید مقاله رو در این پیوند مطالعه کنید.

🌐https://bit.ly/2V9o8D2

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School

🔹🔸آشنایی و بررسی فاز میانی Combine در مُدل Map Reduce
☑️ در این مقاله که در دنیای بیگ دیتا منتشر شده است با هم با فاز میانی Combine در مُدل برنامه نویسی Map Reduce آشنا میشیم و می بینیم کجاها میشه از فاز Combine استفاده کرد و کجاها بهتره از این فاز استفاده نکنیم.

🌐دنیای بیگ دیتا، 📙کانال دنیای بیگ دیتا

🔸🔹آشنایی با #الستیک_سرچ و بررسی مولفه های کلیدی #ELK_Stack

☑️ تو این مقاله از سری مقالات دنیای بیگ دیتا با هم
🔹 با الستیک سرچ بیشتر آشنا می شیم
🔸یه نمونه معماری پیاده سازی ELK Stack رو بررسی می کنیم.
🔹متوجه می شیم #الستیک چطور کار میکنه
🔸 کوئری Full Text رو بیشتر می شناسیم
🔹 به این سوال پاسخ میدیم که اصلا چرا بریم سمت الستیک
🔸روش های دسترسی به #الستیک رو معرفی می کنیم
🔹اتصال الستیک به #هدوپ رو در قالب ES_Connector نشون می دیم
🔸نشون می دیم الستیک تو تئوری CAP کدوم جنبه رو پشتیبانی میکنه
🔹مزایا و کاربردهای کلیدی الستیک رو معرفی می کنیم
🔸با #Logstash آشنا می شیم و می گیم برای چی استفاده میشه
🔹درباره ساخت داشبوردهای تعاملی با #Kibana صحبت می کنیم
🔸و در ادامه نصب الستیک سرچ به همراه #Kibanaروی ویندوز رو داریم


🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School

🔹Deep Learning With Apache Spark: Part 1

First part on a full discussion on how to do Distributed Deep Learning with Apache Spark. This part: What is Spark, basics on Spark+DL and a little more.

By Favio Vazquez,

Spark, defined by its creators is a fast and general engine for large-scale data processing.

The fast part means that it’s faster than previous approaches to work with Big Data like classical MapReduce. The secret for being faster is that Spark runs on Memory (RAM), and that makes the processing much faster than on Disk.

The general part means that it can be use for multiple things, like running distributed SQL, create data pipelines, ingest data into a database, run Machine Learning algorithms, work with graphs, data streams and much more.
—————————
📌Via: @cedeeplearning
📌Other social media: https://linktr.ee/cedeeplearning

link: https://www.kdnuggets.com/2018/04/deep-learning-apache-spark-part-1.html

#apachespark
#databricks
#deeplearning
#pipeline
#machinelearning
#datasicence

📝 یادگیری ماشین جذاب است! قسمت پنجم: ترجمه زبان با استفاده از یادگیری عمیق

🔸 همه ما گوگل ترنسلیت را می شناسیم و عاشق آن هستیم، وب سایتی که می تواند فورا چیزی بین ۱۰۰ زبان مختلف بشر را ترجمه کند؛ مانند یک جادو.

تکنولوژی که پشت این موفقیت بزرگ و غیرمنتظره است، یادگیری مرحله به مرحله ( Sequence-To-Sequence Learning ) نام دارد. این روش یک تکنیک بسیار قوی است که برای حل انواع زیادی از مسائل استفاده می شود. بعد از آن که دیدیم این تکنولوژی چگونه برای ترجمه استفاده می شود، یاد خواهیم گرفت که چگونه الگوریتم های کاملا مشابهی برای نوشتن ربات های چت هوش مصنوعی و توضیح تصاویر، طراحی کنیم.

🔻برای دریافت اطلاعات بیشتر به لینک زیر مراجعه کنید :

⁦⬇️⁩⁦⬇️⁩⁦⬇️⁩⁦⬇️⁩⁦⬇️
https://shahaab-co.ir/mag/edu/ml/machine-learning-is-fun-part-5/

#آموزش
#یادگیری_ماشین
#مجله_شهاب

#معرفی
دوستان عزیز و علاقه مند به حوزه یادگیری ماشین، یادگیری عمیق و پردازش تصویر
🔹کانال شرکت دانش بنیان شهاب که در حوزه #پردازش_تصویر فعال هستند رو خدمتتون معرفی میکنم.
سری مقالات آموزشی که در سایت قرار میدن رو بصورت تخصصی روش وقت گذاشتن و کار کردن و از همه مهمتر تجربه کار در این فیلد رو دارن.
علاقه مندان به فیلدهای یادگیری ماشین، یادگیری عمیق و پردازش تصویر می تونن از وب سایت و کانال خوبی که دارن بازدید کنن.
وب سایت شرکت دانش بنیان شهاب،
کانال شرکت دانش بنیان شهاب

🔹در این بخش از سری مقالات دنیای بیگ دیتا با هم با آپاچی نایفای آشنا می شیم و می بینیم فرآیند طراحی خطوط #پردازش_داده دیگه مثل گذشته سخت نیست و با وجود ابزارهای گرافیکی #نایفای مدیریت #بیگ_دیتا آسون تر از قبل شده. کاری که قبلا با صدها خط کد انجام می شد الآن با Drag & Drop پردازشگرهای قدرتمند وکلیدی انجام میشه.
🔵⚪️🔵
🔶 در این مقاله با هم با موارد ذیل در نایفای آشنا میشیم:
▫️روند پردازش و توزیع داده
▫️معماری و مولفه های نرم افزاری
▫️ویژگی های کلیدی
▫️اجزای مختلف یک پردازشگر
▫️ساخت دریاچه داده با استفاده از نایفای
▫️ساخت دریاچه داده با استفاده از نایفای و آپاچی کافکا
▫️پروژه های زیرمجموعه
▫️نصب و راه اندازی نایفای
▫️معرفی منبع آموزشی به منظور یادگیری نایفای

👌اگه علاقه مند بودید می تونید این مقاله را با دوستانتون و علاقه مندان به بیگ دیتا به اشتراک بزارین.
🌐 وب سایت دنیای بیگ دیتا
📑 کانال دنیای بیگ دیتا

آموزش فارسی نصب تنسرفلو GPU

💠 راهنمای راه‌اندازی Tensorflow بر روی کارت گرافیک‌های NVIDIA

🙏Thanks: @BIMining

🔹مدرسه بیگ دیتا تقدیم می کند:

🔸 آموزش Pandas For Data Science به عنوان گام اول از Python For Data Science Series

☑️ در این دوره آموزشی که بالاترین کیفیت ممکن از حیث ضبط تصویر، صوت، تهیه اسلایدهای آموزشی و محتوای غنی تهیه شده است با امکانات ویژه و توابع کلیدی Python Pandas بیشتر آشنا می شویم و با دیتاست های متنوع به منظور Data Analytics and Manipulation پیش می رویم.

🔵 مشاهده صفحه ویژه و سرفصل های دوره آموزشی Pandas For Data Science در مدرسه بیگ دیتا

🌐 BigDataworld.ir
🖥 BigDataSchool

شب قدر از هزاران ماه برتر است. قرآن کریم

🔵 مدرسه بیگ دیتا تقدیم می کند:

📘 آموزش پروژه محور گراف کاوی و تحلیل شبکه های اجتماعی با استفاده از کتابخانه قدرتمند Python NetworkX

🌐 مشاهده صفحه اختصاصی دوره

🖥 BigDataWorld.ir
✔️ @BigDataSchool

🔰 قسمت های بیست و نهم و سی اُم از دوره آموزشی ویژه Apache Spark با عنوان "پیاده سازی پروژه پردازش متن" در پلتفرم آموزشی مدرسه بیگ دیتا قرار گرفت.

🔷 در این بخش، پروژه پردازش متن را با استفاده از کتابخانه قدرتمند NLTK بر بستر Apache Spark، پیش خواهیم برد.

✔️ کد تخفیف BigDataSchool ویژه ماه مبارک رمضان

📘مشاهده صفحه اختصاصی دوره

#Hadoop #Spark #BigData

🌐BigDataWorld.ir
🖥 @BigDataSchool

🔹🔸🔹 به مناسبت عید سعید فطر، کد تخفیف ویژه عیدانه "Fetr" بر روی دوره های آنلاین پلتفرم آموزشی مدرسه بیگ دیتا اعمال شد.

🔵 دوره آموزشی بیگ دیتا با Hadoop و Apache Spark
⚪️ دوره آموزشی تحلیل گراف و شبکه های اجتماعی با Python NetworkX
🔴 دوره آموزشی دیتاساینس با Python Pandas

🔰 سه دوره انحصاری ویژه در زمینه بیگ دیتا در حال آماده سازی است و به محض تایید نهایی به اطلاع عزیزان ارجمند و همراهان گرامی خواهد رسید.

🌹 تیم مدرسه بیگ دیتا برای شما آرزوی سلامتی، تندرستی و پیشرفت روزافزون را آرزومندست.

🌐 BigDataWorld.ir
🌐 @BigDataSchool

📙دوره ویژه مدرسه تابستانه بیگ دیتا به صورت آنلاین:
🔶 ظرفیت دوره: ۷ نفر.
🔹 پیش نیاز ضروری: آشنایی با مفاهیم بیگ دیتا و مهندسی داده
✔️ برای کسب اطلاعات بیشتر با BigDataSchool_Support@ در تماس باشید.

🌐 BigDataWorld.ir
🌐 @BigDataSchool