BIG DATA DATA SCIENCE DAN DATA ANALYTIC pemrograman

BIG DATA , DATA SCIENCE DAN DATA ANALYTIC pemrograman python untuk semua proses data dan komputasi dalam industri 4. 0 OLEH : Andri Johandri @Andri. Johandri http: //andrijohandri. id

INDUSTRI 4. 0 BIG DATA dengan python ( scrappy, beautysoup bs 4) IOT dengan python ( GPIO Connector Raspberry PI ) ROBOTIKA dengan python INTERNET INFRASTRUKTUR dengan python INTEROPABILITY dengan python ( interkoneksi database )

BIG DATA 3 Vs 1. VELOCITY ( REAL TIME ) 2. VOLUME ( UKURAN ) 3. VARIETY ( BENTUK DATA ) data tidak terstruktur BIG DATA MAP JOB WEB, SOCIAL MEDIA ETC BIG DATA SPECIALIST BIG DATA ANALYTIC MACHINE LEARNING DATA SCIENCE SEARCH ENGINE

DATA SCIENCE Data Science melakukan proses experimen untuk menemukan hal-hal baru pada sebuah big data yang nantinya bermanfaat. Data Tidak Terstruktur

DATA ANALYTIC mengamati data, mencari pola dari data tersebut yang menunjukkan suatu kondisi machine learning

DATA MINING BIG DATA 1. WEBSITE 2. SOCIAL MEDIA BENTUK : 1. TEXT 2. GAMBAR 3. VIDEO 4. AUDIO

CRAWLING APLIKASI YANG MELAKUKAN DUPLIKASI ISI SEBUAH WEBSITE DENGAN CARA MENJELAJAHI TAUTAN INTERNAL YANG TERSEDIA ( ROBOTS. TXT, DAN SITEMAP UNTUK MEMUDAHKAN PROSES CRAWLING ) CONTOH : 1. APLIKASI HTTRACK 2. SPYDER BOT 3. GOOGLE BOT

SCRAPING TEKNIK PENGAMBILAN TEXT, GAMBAR, VIDEO, AUDIO PADA SEBUAH WEBSITE APLIKASI PYTHON : SCRAPY BEAUTYSOUP PEMBERSIHAN DARI CODE HTML , YANG DIDAPAT DARI CRAWLING TEKNIK INI DAPAT PULA DIJADIKAN TEKNIK CRAWLING

DATA HASIL CRAWLING ADALAH SUMBER BIG DATA. UNTUK MENGHASILKAN SEBUAH INDEX YANG DIHARAPKAN PERLU ADANYA "DATA SCIENTIC". APLIKASI FILTER / CLEANING UNTUK KEPERLUAN DATA SCIENTIC : 1. SCRAPPY 2. BEUATYSHOOP HASILNYA ADALAH DATA YANG TELAH BERSIH YANG SELANJUTNYA DISIMPAN DALAM SEBUAH TABEL ( DATABASE / WORKSHEET / TEXT ) TABEL DATA TERSEBUT SELANJUTNYA DAPAT DI ANALISIS DALAM SEBUAH MACHINE LEARNING UNTUK MENGHASILKAN SEBUAH KEPUTUSAN : CONTOH APLIKASI PYTHON : ORANGE LEARNING MACHINE

BEKERJA DENGAN FRAMEWORK PYTHON DJANGO FLASK PYRAMID TORNADO

TERIMA KASIH