💎 دوره آموزشی گراف کاوی و تحلیل شبکه های اجتماعی با پایتون

☑️ با محوریت NetworkX Graph Analytics Library

🎁 لینک دوره

🌐 BigDataworld.ir
🖥 BigDataSchool
💻 BigData_School

🎙آپدیت جدید کتابخانه محبوب و قدرتمند Pandas منتشر شد.

📃 با استفاده از دستور ذیل می تونید آپدیت رو انجام بدین.

pip install --upgrade pandas ==1.1.0

#پانداس #Pandas

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School

🏅محضر محترم دوستان و عزیزانی که پیگیر موقعیت های شغلی تو حوزه های علم داده، بیگ دیتا و هوش مصنوعی هستند

🎙این گروه با هدف پوشش دهی فرصت های شغلی حوزه های مذکور راه اندازی شده است.

📃در گروه به صورت مستمر آگهی های مرتبط با علم داده، بیگ دیتا و هوش مصنوعی قرار می گیرد.

💎همچنین شما به صورت رایگان برای کسب و کار خود درخواست نیرو می دهید یا با ارسال رزومه ، آمادگی خود را جهت کار اعلام می کنید.

لینک گروه: 👇👇👇

🖥 DataJobs

با احترام
محمد حیدری

🔷 دومین دوره مجموعه سخنرانی‌های علم داده و هوش مصنوعی امیرکبیر

🔹برگزاری کارگاه‌ها از تاریخ ۲۲ تا ۲۶ مردادماه و سخنرانی‌ها از تاریخ ۲۷ تا ۳۱ مردادماه خواهد بود.

🔹 ثبت نام و اطلاعات بیشتر:
http://aaiss.ceit.aut.ac.ir

🔻 ظرفیت و مهلت ثبت نام محدود است.

@aaiss_aut
@ceit_ssc

یه سری از دستورات و توابع کلیدی کتابخانه Pandas در این درسنامه ها قرار دارند که دونستن شون برای هر تحلیل گر داده واجبه.

#پانداس #Pandas

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School

Arctic Code Vault

چند وقت پیش گیت هاب خبری رو منتشر کرد که تعداد زیادی از ریپوزیتوری های پابلیک و اکتیو رو به قطب شمال بردن و اونجا نگهداریشون می‌کنن. توی این کلیپ دقیقا نشون داده شده کجا و به چه شکل نگهداری میشن.

خیلی جالبه از دست ندید. 👌

مدل تنسورفلوی خود را در گوگل کلاود با استفاده از تنسورفلو کلاود آموزش دهید.

#تنسورفلو #کلاود #Tensorflow

https://blog.tensorflow.org/2020/08/train-your-tensorflow-model-on-google.html?m=1

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigDataSchool

هم اکنون پلتفرم Databricks، نسخه ۷.۱‌ از Big Query بعنوان راهکاری برای تحلیل داده های ذخیره شده در Google Cloud پشتیبانی می کند.

مزایا:

🎖کاهش حجم انتقال داده
🎖پیاده سازی کوئری های سریع تر
🏅امکان اجرای Direct Query

#Databricks #BigQuery #GoogleCloud

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School

📑 آشنایی با ویژگی های کلیدی نسخه 3.0 آپاچی اسپارک

✔️ 2x performance improvement on TPC-DS over Spark 2.4, enabled by adaptive query execution, dynamic partition pruning and other optimizations

✔️ ANSI SQL compliance

✔️ Significant improvements in pandas APIs, including Python type hints and additional pandas UDFs

✔️ Better Python error handling, simplifying PySpark exceptions

✔️ New UI for structured streaming

✔️ Up to 40x speedups for calling R user-defined functions

✔️ Over 3,400 Jira tickets resolved

#اسپارک #Spark

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School

یه خبر خوب برای علاقه مندان به علم داده و بیگ دیتا

دیتاست ِبیش از یک میلیون و هفتصدهزار مقاله ی وب سایت معتبر Arxiv هم اکنون در دسترس است. خیلی کارهای قشنگی میشه با استفاده از الگوریتم های ماشین لرنینگ و مدل های دیپ لرنینگ روی این تیپ دیتا انجام داد.

لینک خبر در Arxiv
لینک دیتاست در Kaggle

#دیتاست #بیگ_دیتا

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School

آشنایی با دستور DROPMALFORMED در اسپارک

وقتی شما یه فایل CSV رو با یه اسکیمای خاص می خواید بخونید، ممکنه دیتای اصلی در فایل با اون اسکیمای خاص مطابقت نداشته باشه.

بعنوان مثال، یه فیلدی که برای اسم یه شهر تعریف شده، نمی تونه بعنوان یه مقدار عددی، Parse بشه.

اینجا دستور DROPMALFORMED میاد خطوطی رو که شامل فیلدهایی میشن که نمی تونن Parse بشن رو پاک می کنه.

#اسپارک

#Spark #DROPMALFORMED

🎖SparkStack