SlideShare a Scribd company logo

Big data بزرگ داده ها

•Download as PPT, PDF•
•
Omid Sohrabi
Omid Sohrabi

مقدمه ای بر بزرگ داده ها و ابزار های موجود در آن

1 of 41
‫مقدمه‬‫بر‬ ‫ای‬Big Data ‫استاد‬:‫ی‬‫خنجر‬ ‫دکتر‬ ‫دهندگان‬‫ائه‬‫ر‬‫ا‬:‫سهرابی‬ ‫امید‬ ،‫حسنوند‬ ‫سعید‬
www.company.com ‫مطالب‬ ‫فهرست‬ •Big Data‫چیست‬‫؟‬ •‫ا‬‫ر‬‫چ‬Big Data‫؟‬ •‫چالش‬‫پیشه‬‫های‬‫ی‬‫و‬‫ر‬Big Data •‫آینده‬‫ی‬Big Data •‫جنبش‬NoSQL •‫انواع‬NoSQL •MapReduce •Hadoop 1
www.company.com Big Data‫چیست؟‬2 •‫معنای‬‫ی‬‫لغو‬ •‫داده‬ ‫کالن‬ •‫داده‬‫حجیم‬‫های‬ •‫داده‬ ‫گ‬‫ر‬‫بز‬ •‫تعریف‬ •‫د‬‫ر‬‫ندا‬ ‫وجود‬‫واحدی‬‫تعریف‬! •‫تعریف‬ ‫تمامی‬ ‫در‬ ‫اصلی‬ ‫عنصر‬ ‫دو‬‫ها‬ •‫داده‬ ‫از‬ ‫یادی‬‫ز‬ ‫حجم‬ ِ‫وجود‬‫ها‬ •‫پایگاه‬ ِ‫ناتوانی‬‫داده‬ ‫مدیریت‬ ‫در‬ ‫سنتی‬ ‫داده‬ ‫های‬‫ها‬
www.company.com Big Data‫چیست؟‬3 •‫ویژگی‬‫ها‬ Big Data
www.company.com Big Data‫چیست؟‬4 •‫داده‬‫حجم‬‫ها‬(Volume) •‫سال‬ ‫تا‬2003‫داده‬ ‫کل‬ ‫حجم‬‫حدود‬ ،‫موجود‬ ‫های‬ 5‫است‬ ‫بوده‬ ‫اگزابایت‬ •،‫روز‬ ‫دو‬ ‫هر‬ ‫در‬ ‫امروزه‬‫حدود‬5‫اگزابایت‬ ‫می‬ ‫تولید‬ ‫داده‬‫شود‬ •‫ش‬‫ر‬‫گزا‬IBM •‫تولید‬2.5‫روز‬ ‫در‬ ‫داده‬ ‫اگزابایت‬ •‫تولید‬90‫داده‬ ‫کل‬ ‫درصد‬‫دو‬ ‫در‬ ‫موجود‬ ‫های‬ ‫اخیر‬ ‫سال‬ 0.8 Zb 35.2 Zb‫رشدی‬44 ‫برابری‬ 2009 2020
www.company.com Big Data‫چیست؟‬5 •‫داده‬‫حجم‬‫ها‬(Volume) •‫سال‬ ‫تا‬2003‫داده‬ ‫کل‬ ‫حجم‬‫حدود‬ ،‫موجود‬ ‫های‬ 5‫است‬ ‫بوده‬ ‫اگزابایت‬ •،‫روز‬ ‫دو‬ ‫هر‬ ‫در‬ ‫امروزه‬‫حدود‬5‫اگزابایت‬ ‫می‬ ‫تولید‬ ‫داده‬‫شود‬ •‫ش‬‫ر‬‫گزا‬IBM •‫تولید‬2.5‫روز‬ ‫در‬ ‫داده‬ ‫اگزابایت‬ •‫تولید‬90‫داده‬ ‫کل‬ ‫درصد‬‫دو‬ ‫در‬ ‫موجود‬ ‫های‬ ‫اخیر‬ ‫سال‬ EXA 218 PETA 215 TERA 212 ZETTA 221 GIGA 29 2018 2015 2012 2003
www.company.com Big Data‫چیست؟‬6 •‫ها‬ ‫داده‬‫حجم‬(Volume)
www.company.com Big Data‫چیست؟‬7 •‫نمونه‬‫ها‬ •‫فیسبوک‬(1392) •‫بر‬‫ر‬‫کا‬ ‫د‬‫ر‬‫میلیا‬ ‫یک‬ ‫از‬ ‫بیش‬ •‫از‬ ‫بیش‬300‫داده‬ ‫پتابایت‬ •‫از‬‫بیش‬ ِ‫شدن‬ ‫اضافه‬50‫ز‬‫و‬‫ر‬ ‫در‬ ‫داده‬‫ترابایت‬ •‫از‬ ‫بیش‬35‫ی‬‫مجاز‬ ‫دنیای‬ ‫تصاویر‬ ِ‫کل‬ ‫از‬ ‫صد‬‫ر‬‫د‬ •‫گوگل‬(1390) •‫داده‬ ‫پتابایت‬ ‫صد‬ ‫از‬ ‫بیش‬ –‫از‬ ‫بیش‬1000‫وب‬ ‫صفحه‬ ‫د‬‫ر‬‫میلیا‬ •‫حدود‬7.2‫جست‬ ‫د‬‫ر‬‫میلیا‬‫ز‬‫و‬‫ر‬ ‫در‬ ‫وجو‬
www.company.com Big Data‫چیست؟‬8 •‫نمونه‬‫ها‬ •‫یوتیوب‬(1393) •‫داده‬‫اگزابایت‬ ‫یک‬ ‫از‬ ‫بیش‬ •‫ماه‬ ‫در‬ ‫بر‬‫ر‬‫کا‬ ‫د‬‫ر‬‫میلیا‬ ‫یک‬ ‫از‬ ‫بیش‬ ِ‫دید‬‫ز‬‫با‬ •80‫آمریکا‬ ‫از‬ ‫خارج‬‫ترافیک‬ ‫صد‬‫ر‬‫د‬ •‫دقیقه‬ ‫در‬ ‫فیلم‬ ‫ساعت‬ ‫صد‬ ‫شدن‬ ‫اضافه‬ •‫توییتر‬(1393) •‫بر‬‫ر‬‫کا‬ ‫د‬‫ر‬‫میلیا‬ ‫یک‬ ‫حدود‬ •‫از‬ ‫بیش‬124‫سال‬ ‫در‬ ‫توییت‬ ‫د‬‫ر‬‫میلیا‬ •‫حدود‬4500‫ثانیه‬ ‫در‬ ‫توییت‬ •271‫ماه‬ ‫در‬ ‫فعال‬ ‫بر‬‫ر‬‫کا‬ ‫ن‬‫میلیو‬
www.company.com Big Data‫چیست؟‬9 •‫نمونه‬‫ها‬ •‫شبکه‬‫حسگر‬ ‫های‬ •‫مان‬‫ز‬‫سا‬‫ی‬ ‫هواشناس‬ ‫های‬ •‫دستگاه‬‫پزشکی‬‫های‬ •‫ماتیک‬‫ر‬‫بیوانفو‬ •‫مان‬‫ز‬‫سا‬‫گ‬‫ر‬‫بز‬ ‫های‬ •‫و‬...
www.company.com Big Data‫چیست؟‬10 •‫ویژگی‬‫ها‬ Big Data
www.company.com Big Data‫چیست؟‬11 •‫داده‬ ‫در‬ ‫تنوع‬‫ها‬(Variety) •‫داده‬‫های‬‫مند‬‫ر‬‫ساختا‬(Structured) •‫داده‬‫هستند‬ ‫مشخصی‬ ِ‫ساختار‬ ‫دارای‬ ‫که‬ ‫هایی‬ –‫ها‬ ‫رشته‬ –‫اعداد‬ –‫تاریخ‬ –‫و‬... •‫حدود‬20‫داده‬ ‫کل‬ ‫از‬ ‫درصد‬،‫موجود‬ ‫های‬ ‫هستند‬ ‫ساختارمند‬ •‫پایگاه‬ ‫از‬ ‫استفاده‬‫داده‬ ‫های‬‫رابطه‬ ‫ی‬‫ای‬
www.company.com Big Data‫چیست؟‬12 •‫داده‬ ‫در‬ ‫تنوع‬‫ها‬(Variety) •‫داده‬‫مند‬‫ر‬‫ساختا‬‫های‬(Structured) •‫داده‬‫های‬‫مند‬‫ر‬‫ساختا‬‫نیمه‬(Semi-Structured) •‫ندارند‬ ‫مشابه‬ ‫و‬ ‫سازگار‬ ‫ساختاری‬ –XML –Tweets –SGML –Logs –‫و‬... •‫ی‬ ‫داده‬ ‫های‬ ‫پایگاه‬ ‫از‬ ‫استفاده‬ ‫امکان‬ ‫عدم‬ ‫رابطه‬‫ای‬
www.company.com Big Data‫چیست؟‬13 •‫داده‬ ‫در‬ ‫تنوع‬‫ها‬(Variety) •‫داده‬‫مند‬‫ر‬‫ساختا‬‫های‬(Structured) •‫داده‬‫های‬‫مند‬‫ر‬‫ساختا‬‫نیمه‬(Semi-Structured) •‫داده‬‫های‬‫ساختار‬ ‫فاقد‬(Unstructured) •‫هستند‬ ‫ساختاری‬ ‫هرگونه‬ ‫فاقد‬ –‫داده‬‫رسانه‬ ‫چند‬ ‫های‬‫ای‬(‫و‬ ‫صوت‬ ،‫فیلم‬)... –‫ایمیل‬‫ها‬ –‫گزارشات‬ –‫ارائه‬‫ها‬ –‫و‬.... •‫حدود‬70‫تا‬90‫داده‬ ‫کل‬ ‫از‬ ‫درصد‬‫موجود‬ ‫های‬
www.company.com Big Data‫چیست؟‬14 •‫ها‬‫داده‬ ‫در‬ ‫تنوع‬(Variety)
www.company.com Big Data‫چیست؟‬15 •‫ویژگی‬‫ها‬ Big Data
www.company.com Big Data‫چیست؟‬16 •‫داده‬‫سریع‬‫شد‬‫ر‬‫ها‬(velocity) •‫داد‬ ِ‫تولید‬ ‫در‬‫باال‬‫سرعت‬‫ه‬‫جدید‬‫های‬
www.company.com Big Data‫چیست؟‬17 •‫داده‬‫سریع‬‫شد‬‫ر‬‫ها‬(velocity) •‫داده‬ ‫تولید‬ ‫در‬‫باال‬‫سرعت‬‫جدید‬‫های‬ •‫جوها‬ ‫و‬‫پرس‬‫ایجاد‬ ‫در‬ ‫باال‬‫سرعت‬ ‫علمی‬ ‫تجهیزات‬ ‫شبکه‬‫حسگر‬ ‫های‬
www.company.com Big Data‫چیست؟‬18 •‫پیچیدگی‬(complexity) •‫ی‬‫تغییرپذیر‬(Variability) •‫و‬... Big Data 3V’s •‫ویژگی‬‫ها‬
www.company.com ‫ا‬‫ر‬‫چ‬Big Data‫؟‬19 •‫شد‬‫ر‬‫ی‬‫ساز‬‫ذخیره‬ ‫ادوات‬ ‫ظرفیت‬‫ن‬‫و‬‫افز‬ ‫ز‬‫و‬‫ر‬
www.company.com ‫ا‬‫ر‬‫چ‬Big Data‫؟‬20 •‫ی‬‫ساز‬‫ذخیره‬‫ادوات‬ ‫ظرفیت‬‫ن‬‫و‬‫افز‬ ‫ز‬‫و‬‫ر‬ ‫شد‬‫ر‬ •‫چشم‬‫افزایش‬‫سیستم‬‫ی‬ ‫ش‬‫ز‬‫پردا‬ ‫ت‬‫ر‬‫قد‬ ‫گیر‬‫ها‬
www.company.com ‫ا‬‫ر‬‫چ‬Big Data‫؟‬21 •‫ی‬‫ساز‬‫ذخیره‬‫ادوات‬ ‫ظرفیت‬‫ن‬‫و‬‫افز‬ ‫ز‬‫و‬‫ر‬ ‫شد‬‫ر‬ •‫چشم‬‫افزایش‬‫سیستم‬‫ی‬ ‫ش‬‫ز‬‫پردا‬ ‫ت‬‫ر‬‫قد‬ ‫گیر‬‫ها‬ •‫داده‬ ‫حجم‬‫افزایش‬‫موجود‬‫های‬
www.company.com ‫چالش‬‫پیش‬‫های‬‫ی‬‫و‬‫ر‬Big Data22 •‫ش‬‫و‬‫ر‬‫ایی‬‫ر‬‫کا‬‫عدم‬‫اطالعات‬‫تحلیل‬ ‫سنتی‬‫های‬ •‫داده‬‫تحلیل‬ •‫ی‬ ‫شخص‬‫حریم‬ ‫و‬‫امنیت‬ •‫ی‬ ‫ش‬‫ز‬‫پردا‬‫و‬ ‫فنی‬‫مشکالت‬
www.company.com ‫آینده‬‫ی‬Big Data23 •Big Data‫در‬Google Trend
www.company.com ‫آینده‬‫ی‬Big Data24 •Big Data‫در‬Google Trend
www.company.com ‫آینده‬‫ی‬Big Data25 •‫ی‬ ‫هش‬‫و‬‫پژ‬‫جایگاه‬Big Data‫موسسه‬ ‫نظر‬‫از‬‫تنر‬‫ر‬‫گا‬‫ی‬
www.company.com ‫ای‬‫ر‬‫ب‬ ‫ی‬‫ژ‬‫تکنولو‬ ‫چه‬Big Data‫؟‬ ‫د‬‫ر‬‫دا‬ ‫وجود‬ ‫شده‬‫یع‬‫ز‬‫تو‬ ‫و‬‫ساختار‬ ‫ن‬‫بدو‬ ‫مدل‬ ‫یک‬‫از‬‫استفاده‬ ‫مدل‬ ‫این‬ ‫از‬‫استفاده‬ ‫دلیل‬ 26
www.company.com ‫جنبش‬NoSQL27 ‫یخچه‬‫ر‬‫تا‬ Not Only SQL NoSQL‫که‬ ‫کند‬‫نمی‬ ‫بیان‬SQL‫و‬‫شود‬‫استفاده‬ ‫نباید‬ ‫هیچگاه‬ ‫است‬‫مرده‬ ‫یا‬
‫ای‬‫ابطه‬‫ر‬ ‫غیر‬ ‫های‬‫داده‬‫پایگاه‬‫از‬‫هایی‬‫مثال‬Company LOGO 28
www.company.com ‫جنبش‬NoSQL–Key Value29 1–‫ی‬‫ساز‬‫ذخیره‬Key – Value: •‫ای‬‫داده‬‫مدل‬:‫کلید‬‫های‬‫ج‬‫و‬‫ز‬ ‫از‬‫ای‬‫مجموعه‬–‫مقدار‬ •‫مثال‬:Tokyo , Redis , Voldemort
www.company.com ‫جنبش‬NoSQL–Column30 2–‫ر‬‫محو‬ ‫ن‬‫ستو‬‫ی‬‫ساز‬‫ذخیره‬: •‫ای‬‫داده‬‫مدل‬:‫سطرها‬ ‫جای‬‫به‬‫ها‬‫ن‬‫ستو‬ ‫ی‬‫ساز‬‫ذخیره‬ •‫مثال‬:Cassandra, HyperTable, HBase
www.company.com ‫جنبش‬NoSQL–Document31 3–‫سندگرا‬‫ی‬‫ساز‬‫ذخیره‬: •‫ای‬‫داده‬‫مدل‬:‫کلید‬‫ی‬‫مجموعه‬ ‫از‬‫ای‬‫مجموعه‬-‫ها‬‫ر‬‫مقدا‬ •‫مثال‬:CouchDB , MongoDB
www.company.com ‫جنبش‬NoSQL–Graph32 4–‫گراف‬‫ی‬‫ساز‬‫ذخیره‬: •‫ای‬‫داده‬‫مدل‬:‫کلید‬ ،‫ها‬‫تباط‬‫ر‬‫ا‬،‫ها‬‫گره‬–‫هرکدام‬‫ی‬‫و‬‫ر‬ ‫مقدار‬ •‫مثال‬:Sones, AllegroGraph , Neo4j
‫ای‬‫ابطه‬‫ر‬ ‫غیر‬ ‫های‬‫داده‬‫پایگاه‬‫از‬‫هایی‬‫مثال‬Company LOGO 33
www.company.com ‫های‬‫ک‬‫ر‬‫و‬ ‫فریم‬ ‫مقایسه‬NoSQL34  MySQL  MongoDB ‫یا‬ CouchDB  Neo4j
Map ReduceCompany LOGO 35
www.company.com Hadoop36 Hadoop‫همان‬ ،VMware‫متفاوت‬ ‫اهی‬‫ر‬‫در‬‫اما‬ ‫هست‬
‫تفاوت‬Hadoop‫ی‬‫مجاز‬ ‫ماشین‬ ‫و‬Company LOGO37 Hadoop 1.‫فیزیکی‬ ‫سرور‬ ‫چند‬ ‫گیرد‬‫می‬ ‫را‬ 2.‫هم‬ ‫با‬ ‫را‬ ‫آنها‬ ‫کند‬‫می‬ ‫ترکیب‬ 3.‫بزرگ‬ ‫سرور‬ ‫یک‬ ‫دهد‬‫می‬ ‫ارائه‬ ‫مجازی‬ Vmware 1.‫فیزیکی‬ ‫سرور‬ ‫یک‬ ‫گیرد‬‫می‬ 2.‫شکند‬‫می‬ ‫را‬ ‫آن‬ 3.‫مجازی‬ ‫سرور‬ ‫چند‬ ‫دهد‬‫می‬ ‫ارائه‬
www.company.com ‫ی‬‫گیر‬ ‫نتیجه‬38 ‫ک‬‫ر‬‫و‬‫فریم‬‫یک‬ ‫که‬ ‫گفت‬ ‫قاطعیت‬ ‫با‬‫توان‬‫نمی‬NoSQL ‫است‬ ‫کار‬ ‫یک‬‫مختص‬
‫منابع‬Company LOGO39 1 - http://www.economistinsights.com/sites/default/files/downloads/ EIU_SAS_BigData_4.pdf 2 - http://en.wikipedia.org/wiki/MapReduce 3 - http://en.wikipedia.org/wiki/NoSQL 4 - http://www.ibm.com/big-data/us/en/ 5 - Marco Grobelink,Jozef stefan Institute,Big-Data Tutorial, 2013.
www.company.com ‫پاسخ‬ ‫و‬ ‫پرسش‬40

More Related Content

What's hot

오픈소스컨설팅 클러스터제안 V1.0
오픈소스컨설팅 클러스터제안 V1.0오픈소스컨설팅 클러스터제안 V1.0
오픈소스컨설팅 클러스터제안 V1.0
sprdd
 
Hdfs ha using journal nodes
Hdfs ha using journal nodesHdfs ha using journal nodes
Hdfs ha using journal nodes
Evans Ye
 
Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...
Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...
Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...
StreamNative
 
Ceph Block Devices: A Deep Dive
Ceph Block Devices: A Deep DiveCeph Block Devices: A Deep Dive
Ceph Block Devices: A Deep Dive
Red_Hat_Storage
 
GC free coding in @Java presented @Geecon
GC free coding in @Java presented @GeeconGC free coding in @Java presented @Geecon
GC free coding in @Java presented @Geecon
Peter Lawrey
 
Tomcatx performance-tuning
Tomcatx performance-tuningTomcatx performance-tuning
Tomcatx performance-tuning
Vladimir Khokhryakov
 
BlueStore: a new, faster storage backend for Ceph
BlueStore: a new, faster storage backend for CephBlueStore: a new, faster storage backend for Ceph
BlueStore: a new, faster storage backend for Ceph
Sage Weil
 
Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...
Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...
Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...
Sandesh Rao
 
a Secure Public Cache for YARN Application Resources
a Secure Public Cache for YARN Application Resourcesa Secure Public Cache for YARN Application Resources
a Secure Public Cache for YARN Application Resources
DataWorks Summit
 
Oracle RAC 19c - the Basis for the Autonomous Database
Oracle RAC 19c - the Basis for the Autonomous DatabaseOracle RAC 19c - the Basis for the Autonomous Database
Oracle RAC 19c - the Basis for the Autonomous Database
Markus Michalewicz
 
Druid: Sub-Second OLAP queries over Petabytes of Streaming Data
Druid: Sub-Second OLAP queries over Petabytes of Streaming DataDruid: Sub-Second OLAP queries over Petabytes of Streaming Data
Druid: Sub-Second OLAP queries over Petabytes of Streaming Data
DataWorks Summit
 
Hitachi content-platform-architecture-fundamentals
Hitachi content-platform-architecture-fundamentalsHitachi content-platform-architecture-fundamentals
Hitachi content-platform-architecture-fundamentals
ilknurd
 
OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）
OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）
OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）
NTT DATA Technology & Innovation
 
Presentation 12c pdb
Presentation 12c pdbPresentation 12c pdb
Presentation 12c pdb
Jacques Kostic
 
2019.06.27 Intro to Ceph
2019.06.27 Intro to Ceph2019.06.27 Intro to Ceph
2019.06.27 Intro to Ceph
Ceph Community
 
Apache Phoenix + Apache HBase
Apache Phoenix + Apache HBaseApache Phoenix + Apache HBase
Apache Phoenix + Apache HBase
DataWorks Summit/Hadoop Summit
 
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
Yahoo!デベロッパーネットワーク
 
BeeGFS Enterprise Deployment
BeeGFS Enterprise Deployment BeeGFS Enterprise Deployment
BeeGFS Enterprise Deployment
Dirk Petersen
 
Understanding Oracle GoldenGate 12c
Understanding Oracle GoldenGate 12cUnderstanding Oracle GoldenGate 12c
Understanding Oracle GoldenGate 12c
IT Help Desk Inc
 
Ceph Object Storage Reference Architecture Performance and Sizing Guide
Ceph Object Storage Reference Architecture Performance and Sizing GuideCeph Object Storage Reference Architecture Performance and Sizing Guide
Ceph Object Storage Reference Architecture Performance and Sizing Guide
Karan Singh
 

What's hot (20)

오픈소스컨설팅 클러스터제안 V1.0
오픈소스컨설팅 클러스터제안 V1.0오픈소스컨설팅 클러스터제안 V1.0
오픈소스컨설팅 클러스터제안 V1.0
 
Hdfs ha using journal nodes
Hdfs ha using journal nodesHdfs ha using journal nodes
Hdfs ha using journal nodes
 
Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...
Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...
Apache Pulsar: Why Unified Messaging and Streaming Is the Future - Pulsar Sum...
 
Ceph Block Devices: A Deep Dive
Ceph Block Devices: A Deep DiveCeph Block Devices: A Deep Dive
Ceph Block Devices: A Deep Dive
 
GC free coding in @Java presented @Geecon
GC free coding in @Java presented @GeeconGC free coding in @Java presented @Geecon
GC free coding in @Java presented @Geecon
 
Tomcatx performance-tuning
Tomcatx performance-tuningTomcatx performance-tuning
Tomcatx performance-tuning
 
BlueStore: a new, faster storage backend for Ceph
BlueStore: a new, faster storage backend for CephBlueStore: a new, faster storage backend for Ceph
BlueStore: a new, faster storage backend for Ceph
 
Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...
Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...
Oracle Real Application Clusters 19c- Best Practices and Internals- EMEA Tour...
 
a Secure Public Cache for YARN Application Resources
a Secure Public Cache for YARN Application Resourcesa Secure Public Cache for YARN Application Resources
a Secure Public Cache for YARN Application Resources
 
Oracle RAC 19c - the Basis for the Autonomous Database
Oracle RAC 19c - the Basis for the Autonomous DatabaseOracle RAC 19c - the Basis for the Autonomous Database
Oracle RAC 19c - the Basis for the Autonomous Database
 
Druid: Sub-Second OLAP queries over Petabytes of Streaming Data
Druid: Sub-Second OLAP queries over Petabytes of Streaming DataDruid: Sub-Second OLAP queries over Petabytes of Streaming Data
Druid: Sub-Second OLAP queries over Petabytes of Streaming Data
 
Hitachi content-platform-architecture-fundamentals
Hitachi content-platform-architecture-fundamentalsHitachi content-platform-architecture-fundamentals
Hitachi content-platform-architecture-fundamentals
 
OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）
OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）
OpenJDKのコミッタってどんなことしたらなったの？解決してきた技術課題の事例から見えてくる必要な知識と技術（JJUG CCC 2023 Spring）
 
Presentation 12c pdb
Presentation 12c pdbPresentation 12c pdb
Presentation 12c pdb
 
2019.06.27 Intro to Ceph
2019.06.27 Intro to Ceph2019.06.27 Intro to Ceph
2019.06.27 Intro to Ceph
 
Apache Phoenix + Apache HBase
Apache Phoenix + Apache HBaseApache Phoenix + Apache HBase
Apache Phoenix + Apache HBase
 
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
1000台規模のHadoopクラスタをHive/Tezアプリケーションにあわせてパフォーマンスチューニングした話
 
BeeGFS Enterprise Deployment
BeeGFS Enterprise Deployment BeeGFS Enterprise Deployment
BeeGFS Enterprise Deployment
 
Understanding Oracle GoldenGate 12c
Understanding Oracle GoldenGate 12cUnderstanding Oracle GoldenGate 12c
Understanding Oracle GoldenGate 12c
 
Ceph Object Storage Reference Architecture Performance and Sizing Guide
Ceph Object Storage Reference Architecture Performance and Sizing GuideCeph Object Storage Reference Architecture Performance and Sizing Guide
Ceph Object Storage Reference Architecture Performance and Sizing Guide
 

Viewers also liked

کلان داده کاربردها و چالش های آن
کلان داده کاربردها و چالش های آنکلان داده کاربردها و چالش های آن
کلان داده کاربردها و چالش های آن
Hamed Azizi
 
عظيم داده چيست؟
عظيم داده چيست؟عظيم داده چيست؟
عظيم داده چيست؟
digidanesh
 
A Story of Big Data:Introduction
A Story of Big Data:IntroductionA Story of Big Data:Introduction
A Story of Big Data:Introduction
Mobin Ranjbar
 
Introduction to Apache Hadoop in Persian - آشنایی با هدوپ
Introduction to Apache Hadoop in Persian - آشنایی با هدوپIntroduction to Apache Hadoop in Persian - آشنایی با هدوپ
Introduction to Apache Hadoop in Persian - آشنایی با هدوپ
Mobin Ranjbar
 
Hadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعی
Hadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعیHadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعی
Hadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعی
Mobin Ranjbar
 
Big Data and select suitable tools
Big Data and select suitable toolsBig Data and select suitable tools
Big Data and select suitable tools
Meghdad Hatami
 
Big Data Processing in Cloud Computing Environments
Big Data Processing in Cloud Computing EnvironmentsBig Data Processing in Cloud Computing Environments
Big Data Processing in Cloud Computing Environments
Farzad Nozarian
 
هادوپ چيست؟
هادوپ چيست؟هادوپ چيست؟
هادوپ چيست؟
digidanesh
 
آشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگ
آشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگآشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگ
آشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگ
Amir Sedighi
 
فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies
فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies
فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies
Ehsan Asgarian
 
Internet of Things Security Challlenges
Internet of Things Security ChalllengesInternet of Things Security Challlenges
Internet of Things Security Challlenges
quickheal_co_ir
 
Object Based Databases
Object Based DatabasesObject Based Databases
Object Based Databases
Farzad Nozarian
 
تشخیص انجمن در مقیاس کلان داده
تشخیص انجمن در مقیاس کلان دادهتشخیص انجمن در مقیاس کلان داده
تشخیص انجمن در مقیاس کلان داده
Navid Sedighpour
 
(3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده
(3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده (3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده
(3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده
Mohsen Fayyaz
 
داده های جریانی streaming data
داده های جریانی streaming dataداده های جریانی streaming data
داده های جریانی streaming data
Hosseinieh Ershad Public Library
 
Software Cost Estimation Methods:A Review - Persian
Software Cost Estimation Methods:A Review - PersianSoftware Cost Estimation Methods:A Review - Persian
Software Cost Estimation Methods:A Review - Persian
Mobin Ranjbar
 
داده های عظیم چگونه دنیا را تغییر خواهند داد
داده های عظیم چگونه دنیا را تغییر خواهند داد داده های عظیم چگونه دنیا را تغییر خواهند داد
داده های عظیم چگونه دنیا را تغییر خواهند داد
Farzad Khandan
 
عصر کلان داده، چرا و چگونه؟
عصر کلان داده، چرا و چگونه؟عصر کلان داده، چرا و چگونه؟
عصر کلان داده، چرا و چگونه؟
datastack
 
اینترنت اشیا در 10 دقیقه
اینترنت اشیا در 10 دقیقهاینترنت اشیا در 10 دقیقه
اینترنت اشیا در 10 دقیقه
Mahmood Neshati (PhD)
 
مروی بر استارترکیتها و پلتفرمهای اینترنت اشیاء
مروی بر استارترکیتها و پلتفرمهای اینترنت اشیاءمروی بر استارترکیتها و پلتفرمهای اینترنت اشیاء
مروی بر استارترکیتها و پلتفرمهای اینترنت اشیاء
startupIoT
 

Viewers also liked (20)

کلان داده کاربردها و چالش های آن
کلان داده کاربردها و چالش های آنکلان داده کاربردها و چالش های آن
کلان داده کاربردها و چالش های آن
 
عظيم داده چيست؟
عظيم داده چيست؟عظيم داده چيست؟
عظيم داده چيست؟
 
A Story of Big Data:Introduction
A Story of Big Data:IntroductionA Story of Big Data:Introduction
A Story of Big Data:Introduction
 
Introduction to Apache Hadoop in Persian - آشنایی با هدوپ
Introduction to Apache Hadoop in Persian - آشنایی با هدوپIntroduction to Apache Hadoop in Persian - آشنایی با هدوپ
Introduction to Apache Hadoop in Persian - آشنایی با هدوپ
 
Hadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعی
Hadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعیHadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعی
Hadoop Case Studies in the Real World in Persian - کاربردهای هدوپ در دنیای واقعی
 
Big Data and select suitable tools
Big Data and select suitable toolsBig Data and select suitable tools
Big Data and select suitable tools
 
Big Data Processing in Cloud Computing Environments
Big Data Processing in Cloud Computing EnvironmentsBig Data Processing in Cloud Computing Environments
Big Data Processing in Cloud Computing Environments
 
هادوپ چيست؟
هادوپ چيست؟هادوپ چيست؟
هادوپ چيست؟
 
آشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگ
آشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگآشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگ
آشنایی با داده‌های بزرگ و تکنیک‌های برنامه‌سازی برای پردازش داده‌های بزرگ
 
فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies
فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies
فناوری‌های حوزه‌ی کلان داده - Introduction to Big Data Technologies
 
Internet of Things Security Challlenges
Internet of Things Security ChalllengesInternet of Things Security Challlenges
Internet of Things Security Challlenges
 
Object Based Databases
Object Based DatabasesObject Based Databases
Object Based Databases
 
تشخیص انجمن در مقیاس کلان داده
تشخیص انجمن در مقیاس کلان دادهتشخیص انجمن در مقیاس کلان داده
تشخیص انجمن در مقیاس کلان داده
 
(3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده
(3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده (3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده
(3) تحلیل با رویکرد یادگیری ژرف بر بستر کلان‌داده
 
داده های جریانی streaming data
داده های جریانی streaming dataداده های جریانی streaming data
داده های جریانی streaming data
 
Software Cost Estimation Methods:A Review - Persian
Software Cost Estimation Methods:A Review - PersianSoftware Cost Estimation Methods:A Review - Persian
Software Cost Estimation Methods:A Review - Persian
 
داده های عظیم چگونه دنیا را تغییر خواهند داد
داده های عظیم چگونه دنیا را تغییر خواهند داد داده های عظیم چگونه دنیا را تغییر خواهند داد
داده های عظیم چگونه دنیا را تغییر خواهند داد
 
عصر کلان داده، چرا و چگونه؟
عصر کلان داده، چرا و چگونه؟عصر کلان داده، چرا و چگونه؟
عصر کلان داده، چرا و چگونه؟
 
اینترنت اشیا در 10 دقیقه
اینترنت اشیا در 10 دقیقهاینترنت اشیا در 10 دقیقه
اینترنت اشیا در 10 دقیقه
 
مروی بر استارترکیتها و پلتفرمهای اینترنت اشیاء
مروی بر استارترکیتها و پلتفرمهای اینترنت اشیاءمروی بر استارترکیتها و پلتفرمهای اینترنت اشیاء
مروی بر استارترکیتها و پلتفرمهای اینترنت اشیاء
 

Similar to Big data بزرگ داده ها

وبینار Data Integration
وبینار Data Integrationوبینار Data Integration
وبینار Data Integration
Hosseinieh Ershad Public Library
 
مقدمه ای بر داده کاوی
مقدمه ای بر داده کاویمقدمه ای بر داده کاوی
مقدمه ای بر داده کاوی
data scientist
 
طراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وب
طراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وبطراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وب
طراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وب
MoEii Hm
 
مقدمه ای بر جمع آوری اطلاعات
مقدمه ای بر جمع آوری اطلاعاتمقدمه ای بر جمع آوری اطلاعات
مقدمه ای بر جمع آوری اطلاعات
iuvmtech
 
Fo it 94-11-database
Fo it 94-11-databaseFo it 94-11-database
Fo it 94-11-database
mb_dadkhah
 
Librarian2.0-v05
Librarian2.0-v05Librarian2.0-v05
Librarian2.0-v05
YaBeSH KelassUp
 
اسلايد آموزشي هوش تجاري
اسلايد آموزشي هوش تجارياسلايد آموزشي هوش تجاري
اسلايد آموزشي هوش تجاري
Ali Masoombeigi
 
1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم
1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم
1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم
Ebrahim S. Barazandeh
 
Efazati opendata slides
Efazati opendata slidesEfazati opendata slides
Efazati opendata slides
Hosseinieh Ershad Public Library
 
Opendata and business - داده های باز و کسب و کار
Opendata and business - داده های باز و کسب و کار Opendata and business - داده های باز و کسب و کار
Opendata and business - داده های باز و کسب و کار
efazati
 
نمایه سازی ماشینی در گوگل
نمایه سازی ماشینی در گوگلنمایه سازی ماشینی در گوگل
نمایه سازی ماشینی در گوگل
Javad Pourhosaini
 
What is big data and how use that
What is big data and how use thatWhat is big data and how use that
What is big data and how use that
shohreh deldari
 
How to get startup ideas (karnova.ir)
How to get startup ideas (karnova.ir)How to get startup ideas (karnova.ir)
How to get startup ideas (karnova.ir)
Ali Sohofi
 
مراکز داده
مراکز دادهمراکز داده
مراکز داده
aria1248
 
نرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنانرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنا
danapardaz
 
نرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنانرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنا
dana_pardaz
 
توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...
توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...
توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...
Web Standards School
 
13940305-NetManagementOS_ver1.5
13940305-NetManagementOS_ver1.513940305-NetManagementOS_ver1.5
13940305-NetManagementOS_ver1.5
Ehsan Khanahmadi
 
داده‏اي سازي کسب و کار
داده‏اي سازي کسب و کارداده‏اي سازي کسب و کار
داده‏اي سازي کسب و کار
Hosseinieh Ershad Public Library
 

Similar to Big data بزرگ داده ها (20)

وبینار Data Integration
وبینار Data Integrationوبینار Data Integration
وبینار Data Integration
 
Sharding
ShardingSharding
Sharding
 
مقدمه ای بر داده کاوی
مقدمه ای بر داده کاویمقدمه ای بر داده کاوی
مقدمه ای بر داده کاوی
 
طراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وب
طراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وبطراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وب
طراحی، پیاده‌سازی و ارزیابی رایانش توری تحت وب
 
مقدمه ای بر جمع آوری اطلاعات
مقدمه ای بر جمع آوری اطلاعاتمقدمه ای بر جمع آوری اطلاعات
مقدمه ای بر جمع آوری اطلاعات
 
Fo it 94-11-database
Fo it 94-11-databaseFo it 94-11-database
Fo it 94-11-database
 
Librarian2.0-v05
Librarian2.0-v05Librarian2.0-v05
Librarian2.0-v05
 
اسلايد آموزشي هوش تجاري
اسلايد آموزشي هوش تجارياسلايد آموزشي هوش تجاري
اسلايد آموزشي هوش تجاري
 
1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم
1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم
1393 itrc-ارائه-مدل-مفهومی-روندها-و-حوزه-های-تحقیقاتی-داده-های-عظیم
 
Efazati opendata slides
Efazati opendata slidesEfazati opendata slides
Efazati opendata slides
 
Opendata and business - داده های باز و کسب و کار
Opendata and business - داده های باز و کسب و کار Opendata and business - داده های باز و کسب و کار
Opendata and business - داده های باز و کسب و کار
 
نمایه سازی ماشینی در گوگل
نمایه سازی ماشینی در گوگلنمایه سازی ماشینی در گوگل
نمایه سازی ماشینی در گوگل
 
What is big data and how use that
What is big data and how use thatWhat is big data and how use that
What is big data and how use that
 
How to get startup ideas (karnova.ir)
How to get startup ideas (karnova.ir)How to get startup ideas (karnova.ir)
How to get startup ideas (karnova.ir)
 
مراکز داده
مراکز دادهمراکز داده
مراکز داده
 
نرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنانرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنا
 
نرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنانرم افزار مدیریت اکتیو دایرکتوری برنا
نرم افزار مدیریت اکتیو دایرکتوری برنا
 
توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...
توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...
توسعه نرم‌افزارهای مقیاس‌پذیر بر اساس معماری ریزسرویسها (Microservices) و اجر...
 
13940305-NetManagementOS_ver1.5
13940305-NetManagementOS_ver1.513940305-NetManagementOS_ver1.5
13940305-NetManagementOS_ver1.5
 
داده‏اي سازي کسب و کار
داده‏اي سازي کسب و کارداده‏اي سازي کسب و کار
داده‏اي سازي کسب و کار
 

Big data بزرگ داده ها