Forwarded from Hadoop.ir
✅ ترفندهای هدوپ ✅
در محیط واقعی برای حفظ امنیت سرورها هیچ وقت هدوپ را با شماره پورت های استاندارد راه اندازی نکنید و همیشه یک دفترچه از شماره های حیاتی کلاستر همراه خود داشته باشید.
مرجع هدوپ ایران
http://www.hadoop.ir
@hadoop
در محیط واقعی برای حفظ امنیت سرورها هیچ وقت هدوپ را با شماره پورت های استاندارد راه اندازی نکنید و همیشه یک دفترچه از شماره های حیاتی کلاستر همراه خود داشته باشید.
مرجع هدوپ ایران
http://www.hadoop.ir
@hadoop
Forwarded from Hadoop.ir
✅ نکته های هدوپ ✅
یکی از اشتباهاتی که در استفاده از هدوپ رخ می دهد این است که هدوپ در همه شرایط بهترین نتیجه را خواهد داشت. در طراحی الگوریتم ها معمولا گفته می شود یک فایل حجیم را تبدیل به فایل های کوچک تر کنید تا پردازش آن سریع تر و به صورت موازی انجام شود. در هدوپ این نکته دقیقا برعکس است. هدوپ در هنگام کار با فایل های کوچک نتیجه ای مطلوب نخواهد داشت. اتفاقا اگر به هدوپ یک فایل حجیم بدهید بهتر از آن است که چند فایل کوچیک تکه تکه شده از یک فایل حجیم را بدهید. به دلیل ایجاد سربار بالا در خواندن فایل های کوچک،زمان اجرا و میزان مصرف حافظه افزایش چشمگیری خواهد داشت. راه حل جلوگیری از اینکار تبدیل فایل های کوچک به SequenceFile ها است که به جای وجود چند فایل کوچک،یک فایل حجیم داشته باشید. درست انتخاب کنید.
مرجع هدوپ ایران
http://www.hadoop.ir
@hadoop
یکی از اشتباهاتی که در استفاده از هدوپ رخ می دهد این است که هدوپ در همه شرایط بهترین نتیجه را خواهد داشت. در طراحی الگوریتم ها معمولا گفته می شود یک فایل حجیم را تبدیل به فایل های کوچک تر کنید تا پردازش آن سریع تر و به صورت موازی انجام شود. در هدوپ این نکته دقیقا برعکس است. هدوپ در هنگام کار با فایل های کوچک نتیجه ای مطلوب نخواهد داشت. اتفاقا اگر به هدوپ یک فایل حجیم بدهید بهتر از آن است که چند فایل کوچیک تکه تکه شده از یک فایل حجیم را بدهید. به دلیل ایجاد سربار بالا در خواندن فایل های کوچک،زمان اجرا و میزان مصرف حافظه افزایش چشمگیری خواهد داشت. راه حل جلوگیری از اینکار تبدیل فایل های کوچک به SequenceFile ها است که به جای وجود چند فایل کوچک،یک فایل حجیم داشته باشید. درست انتخاب کنید.
مرجع هدوپ ایران
http://www.hadoop.ir
@hadoop
مقاله کوتاهی در مورد کیفیت داده و اهمیت آن در حوزه های مختلف
http://www.infernotions.com/importance-clean-data/
http://www.infernotions.com/importance-clean-data/
Infernotions
The importance of clean data
Survey results on how critical data is to the bottom line, how data drives marketing, what are the common sources of data errors, and more.
IBM data scientists break big data into four dimensions: volume, variety, velocity and veracity. This infographic explains and gives examples of each 👇👇👇
Explore the IBM Analytics Technology Platform
http://www.ibm.com/analytics/us/en/technology/?S_TACT=M161089W&iio=panalytics&cmp=m1610&ct=m161089w&cr=newsroom&cm=h&csot=-&ccy=-&cpb=-&cd=-
http://www.ibm.com/analytics/us/en/technology/?S_TACT=M161089W&iio=panalytics&cmp=m1610&ct=m161089w&cr=newsroom&cm=h&csot=-&ccy=-&cpb=-&cd=-
Ibm
IBM Analytics - Technology - United States
Turn faster insight into faster action with unmatched analytics capabilities on a foundation of data you can trust. Adapt easily to today's hybrid data--structured and unstructured, at rest and in motion, on premises, on cloud and in mixed environments.
Cloud Data Servicesis Open for DataWhere unstructured data goes to be understood
http://www.ibm.com/analytics/us/en/technology/cloud-data-services/open-for-data/
http://www.ibm.com/analytics/us/en/technology/cloud-data-services/open-for-data/
Ibm
IBM Cloud Data Services is open for data - IBM Analytics
IBM Data Science Experience is an environment that has everything a data scientist needs to be successful. Use the best of open source, tap into IBM’s unique productivity features, grow your capabilities, and share your success
به سلامتی تمام کسانی که مهندسی را درک کردند، به سلامتی تمام کسانی که پلی ساختند از انتهای بن بست کوچه ی رفاه تا بیکران، به سلامتی تمام کسانی که خود را شبانه روز وقف کردند تا همگان شبانه روزی روشن داشته باشند، به سلامتی تمام کسانی که لذتش را فهمیدند نه آنان که تنها به نامش خوانده شدند…
روز مهندس مبارک🌷
@BigDataTechnology
درود فراوان به تمام دوستان و همراهان بیگ دیتا.
امروز فایل تصویری آموزش :
👈 "ذخیره دیتا در فایل سیستم هدوپ "👉
برای علاقمندان در کانال قرار می گیرد.
در ضمن بنا به درخواست دوستان طی چند روز آینده معرفی پایگاه داد های nosql و آموزش تخصصی کاساندرا همراه با فایل های تصویری در کانال بیگ دیتا انجام می شود.
با ما همراه باشید.
به دوستان و علاقمندان اطلاع دهید.
با تشکر از توجه شما
گلناز اردشیری
@BigDataTechnology
روز مهندس مبارک🌷
@BigDataTechnology
درود فراوان به تمام دوستان و همراهان بیگ دیتا.
امروز فایل تصویری آموزش :
👈 "ذخیره دیتا در فایل سیستم هدوپ "👉
برای علاقمندان در کانال قرار می گیرد.
در ضمن بنا به درخواست دوستان طی چند روز آینده معرفی پایگاه داد های nosql و آموزش تخصصی کاساندرا همراه با فایل های تصویری در کانال بیگ دیتا انجام می شود.
با ما همراه باشید.
به دوستان و علاقمندان اطلاع دهید.
با تشکر از توجه شما
گلناز اردشیری
@BigDataTechnology
Internet of Things
معرفی اینترنت اشیاء و فناوری های مرتبط
📞ارتباط با ادمین :
@Golnazardeshiri
-
https://telegram.me/IoTTechnology
معرفی اینترنت اشیاء و فناوری های مرتبط
📞ارتباط با ادمین :
@Golnazardeshiri
-
https://telegram.me/IoTTechnology
Forwarded from Mobin Ranjbar
فرهنگستان زبان فارسی برگردان فارسی Big Data رو «مه داده» انتخاب کرده: http://alef.ir/vdchvwnxk23nzxd.tft2.html?319304
old.alef.ir
تازهترین واژههای مصوب فرهنگستان اعلام شد
فرهنگستان زبان و ادب فارسی برخی از تازهترین واژههای مصوب در حوزههای ورزش، آمار، فناوری اطلاعات و علوم گیاهی را اعلام کرد.
Forwarded from Ping Channel
براساس تحقیقات IBM، در حال حاضر امارات متحده عربی به عنوان یک بازار بالقوه برای Big Data به رسمیت شناخته شده و در حال تلاش برای نفوذ بیشتر با تکنولوژی و خدمات بهتر است.
منبع: http://www.datasciencecentral.com/profiles/blogs/big-data-getting-bigger-in-uae
منبع: http://www.datasciencecentral.com/profiles/blogs/big-data-getting-bigger-in-uae
Datasciencecentral
Big Data getting bigger in UAE
With immense growth in technology, financial institutes, skyscrapers and malls, one can find that the number of consumers have increased exponentially in the M…