Apakah bisa SCRAPPING DATA dari website ?

Selamat Pagi, semoga sehat selalu

Scraping data atau web scraping adalah proses otomatisasi untuk mengekstrak data dari suatu situs web. Dengan menggunakan teknik ini, kita bisa mengumpulkan informasi yang tersedia di internet dalam jumlah besar tanpa harus menyalinnya secara manual. Contoh penggunaan yang paling sering adalah mencari dan mengumpulkan nomor telpon/email dari sebuah web.


Adapun Alat & Teknologi yang Digunakan

🔹 Python Libraries: BeautifulSoup, Scrapy, Selenium

🔹 Google Chrome Extensions: Web Scraper, Instant Data Scraper

🔹 API: Beberapa situs menyediakan API legal sebagai alternatif scraping


Dari ke 3 pilihan diatas, Google Chrome Extension adalah pilihan termudah, kita hanya perlu install di chrome selanjut langsung bisa digunakan, Berikut kami share beberapa link yang dapat digunakan untuk scrapping data


1. Ultimate Web Scraper

Ekstensi ini memungkinkan Anda mengekstrak teks, gambar, email, dan tautan dari situs web dengan satu klik. 

https://chromewebstore.google.com/detail/ultimate-web-scraper/pdeldjlcnhallaapdggcmhpailpnnkmg?utm_source=chatgpt.com


2. Simplescraper — a fast and free web scraper

Ekstensi ini memungkinkan Anda mengekstrak data dari situs web dengan cepat dan mudah.

https://chromewebstore.google.com/detail/simplescraper-%E2%80%94-a-fast-an/lnddbhdmiciimpkbilgpklcglkdegdkg?utm_source=chatgpt.com


3. Data Scraper - Easy Web Scraping

Ekstensi ini memungkinkan Anda mengekstrak data dari halaman web HTML dan mengimpornya ke dalam spreadsheet Microsoft Excel.

https://chromewebstore.google.com/detail/data-scraper-easy-web-scr/nndknepjnldbdbepjfgmncbggmopgden?utm_source=chatgpt.com


4. Web Scraper - Free Web Scraping

Ekstensi ini memungkinkan Anda mengekstrak data dari situs web yang kompleks dan mengekspornya dalam berbagai format.

https://chromewebstore.google.com/detail/web-scraper-free-web-scra/jnhgnonknehpejjnehehllkliplmbmhn?utm_source=chatgpt.com


5. Instant Data Scraper

Ekstensi ini memungkinkan Anda mengekstrak data dari tabel atau daftar di situs web dengan mudah.

https://chromewebstore.google.com/detail/instant-data-scraper/ofaokhiedipichpaobibbnahnkdoiiah?utm_source=chatgpt.com

Silahkan dicoba, semoga bermanfaat

terimkasih





www.kersen.co.id


Comments

Post a Comment

Popular posts from this blog

Reverse Geocoding dalam bahasan singkat

Image
  Apa itu Reverse Geocoding? Reverse geocoding adalah proses mengonversi koordinat geografis (latitude, longitude) menjadi alamat atau informasi lokasi yang lebih mudah dipahami manusia, seperti nama jalan, kota, atau kode pos. Contohnya: Input: ( -7.250445, 112.768845 ) Output: "Jl. Raya Darmo, Surabaya, Jawa Timur, Indonesia" Konsep Reverse Geocoding Sumber Data : Memanfaatkan data peta dari penyedia layanan seperti OpenStreetMap (OSM), Google Maps, Mapbox, atau HERE Maps. Proses Request : Koordinat dikirim ke API atau server GIS yang mendukung reverse geocoding. Response : API mengembalikan informasi alamat atau lokasi yang sesuai dengan koordinat tersebut. Teknis Implementasi dalam Kode Berikut adalah beberapa contoh penggunaan API yang mendukung reverse geocoding . 1.       Menggunakan OpenStreetMap (Nominatim API - Gratis)   Import requests latitude = -7.250445 longitude ...
Read more

Penjelasan singkat parsing data GPS Tracker Concox

Selamat Malam, berikut penjelasan singkat parsing data GPS Tracker Concox semoga bermanfaat, Diawal memahami struktur Paket Protokol GT06, dimana setiap paket terdiri dari: 1.Start Bit (0x78 0x78 or 0x79 0x79 for long data) 2.Packet Length (Number of bytes following this field) 3.Protocol Number (Defines the type of packet) 4.Data Content (Varies based on the protocol number) 5.Serial Number (Unique identifier for the message) 6.Error Check Code (Checksum) (XOR of all bytes from length to serial number) 7.Stop Bit (0x0D 0x0A) Protocol    Number Packet Type 0x01   Login Packet 0x12   GPS Location Packet 0x13   Status/Alarm Packet 0x15   Heartbeat Packet Contoh Parsing Parsing a Location Packet (0x12) 78 78 22 12 0F 03 15 11 23 45 37 C5 06 12 34 56 78 09 87 65 43 10 01 04 CC 00 00 01 23 45 67 89 0D 0A Kta breakdown: Start Bit: 78 78 Packet Length: 22 (34 bytes) Protocol Number: 12 (GPS location) Date & Time: 0F 03 15 11 23 45 (Year: 0F (2015), Mon...
Read more

Scope of Work Sales Force Automation [SFA] Web & Mobile Apps

Image
  SCOPE OF WORK SALES FORCE AUTOMATION [SFA]     Web Interface   1.         User Management 1.1      Multi Perusahaan 1.2      Template User Access < user management adalah bagian menu untuk create/edit/delete akun perusahaan dan user dari Perusahaan baru, sedangkan untuk level akses dibuat dalam template user access >   2.         Master Data Salesman 2.1      Data Personal Salesman : data sesuai KTP, foto KTP, no hp, jabatan, tim [linked company] 2.2      Jabatan [linked Data Personal Salesman] 2.3      Tim [linked Data Personal] 2.4      Target & Point Salesman [linked Data Personal Salesman], berdasar periode dan auto reset 2.5      Tracking Salesman < Master Data Salesmen adalah bagian dari menu diperuntukkan sebagai data utama personal d...
Read more