Ringkasan Utama
SaaS pemantau harga marketplace melacak harga dan stok kompetitor di Tokopedia dan Shopee agar penjual bisa bereaksi cepat. Membangunnya berarti memilih antara API resmi penjual atau scraping halaman publik, menjalankan job terjadwal yang mendeteksi perubahan, menyimpan riwayat harga, dan mengirim notifikasi lewat WhatsApp atau email, sambil menghormati rate limit dan ketentuan platform.
Penjual di Tokopedia dan Shopee bersaing di harga, tetapi hampir tidak ada yang bisa melihat berapa harga rival mereka secara real time. Mereka mengecek beberapa halaman kompetitor secara manual, melewatkan flash sale, dan kehilangan penjualan hari itu. Titik buta ini adalah masalah nyata yang berulang, dan justru inilah jenis masalah yang bisa diselesaikan oleh SaaS kecil.
Artikel ini membahas bagaimana Anda benar-benar membangun layanan pemantau harga dan stok kompetitor untuk penjual marketplace di Indonesia. Kita akan bahas dua cara mendapatkan datanya beserta tradeoff-nya, pipeline pemantauan yang mengubah harga mentah menjadi notifikasi, cara menjalankannya secara bertanggung jawab, serta jebakan yang sering menggagalkan proyek seperti ini, termasuk area abu-abu hukum seputar scraping yang tidak boleh Anda sepelekan.
Masalah Penjual dan Peluangnya
Seorang penjual online memasang harga tetap untuk produknya, padahal pasar di bawahnya bergerak tiap jam. Kompetitor menurunkan harga untuk kampanye, kehabisan stok, atau meluncurkan bundling, dan penjual baru sadar ketika penjualannya sendiri turun. Price intelligence, yaitu praktik memahami dinamika harga di tingkat pasar dan dampaknya pada bisnis, biasanya hanya terjangkau oleh peritel besar. Penjual kecil terpaksa menyegarkan halaman kompetitor secara manual.
Kesenjangan itulah peluangnya. Alat sederhana yang mengawasi segelintir listing kompetitor, mencatat pergerakan harga dan stok mereka dari waktu ke waktu, dan memberi tahu penjual begitu ada perubahan, benar-benar berguna. Nilainya bukan pada analitik canggih di hari pertama; cukup menghilangkan pengecekan manual dan tidak pernah lagi ketinggalan langkah kompetitor.
- Penjual tidak bisa mengawasi puluhan listing kompetitor secara manual di dua marketplace sepanjang hari.
- Penurunan harga atau kehabisan stok kompetitor yang terlewat berarti penjualan yang hilang sore itu juga.
- Bahkan loop deteksi-dan-notifikasi sederhana mengalahkan penyegaran halaman manual dan menarik pelanggan awal.
Akuisisi Data: API versus Scraping
Ada dua cara jujur untuk mendapatkan data, dan keduanya menyelesaikan masalah yang berbeda. API resmi marketplace, seperti Tokopedia Seller API dan Shopee Open Platform, terautentikasi lewat OAuth2 dan memberi data yang bersih serta andal, tetapi dirancang agar seorang penjual mengelola tokonya sendiri, bukan untuk membaca angka pribadi kompetitor. API adalah pilihan tepat untuk produk, stok, dan pesanan milik penjual itu sendiri, di mana Anda punya izin dan respons yang terstruktur stabil.
Data kompetitor biasanya hanya ada di halaman listing publik, sehingga banyak pengembang beralih ke scraping halaman tersebut. Scraping memberi Anda harga dan stok kompetitor yang tidak akan diberikan API mana pun, tetapi ia rapuh dan sensitif secara hukum. Tata letak halaman berubah tanpa peringatan, marketplace memasang pertahanan anti-bot, dan ketentuan layanan platform bisa melarang pengumpulan otomatis. Perlakukan scraping sebagai tradeoff serius, bukan jalan pintas gratis, dan andalkan API resmi di mana pun datanya memang berhak Anda baca.
Gunakan API resmi penjual untuk katalog dan pesanan milik penjual itu sendiri, di mana datanya berizin dan terstruktur, dan sisakan scraping hanya untuk listing kompetitor publik yang benar-benar tidak bisa Anda peroleh dengan cara lain.
Pipeline Pemantauan
Begitu Anda bisa mengambil satu harga, produk ini pada dasarnya adalah pipeline data kecil. Tiap bagian sederhana secara sendiri-sendiri, dan nilainya muncul saat semuanya dirangkai menjadi loop andal yang berjalan tanpa pengawasan dan hanya mengganggu penjual ketika ada yang benar-benar berubah.
- Scheduler: job bergaya cron atau berbasis antrean mengambil tiap listing terpantau pada interval tertentu, disebar dan tidak sekaligus.
- Deteksi perubahan: bandingkan harga dan stok baru dengan nilai tersimpan terakhir, dan bertindak hanya jika ada perbedaan nyata.
- Penyimpanan riwayat: tambahkan tiap pembacaan dengan cap waktu agar Anda bisa membuat grafik tren dan menjawab bagaimana sebuah harga bergerak selama berminggu-minggu.
- Notifikasi dan dashboard: kirim pemberitahuan WhatsApp atau email saat ada perubahan, dan tampilkan harga terkini, riwayat, serta saran repricing sederhana di dashboard.
Menjalankannya Secara Bertanggung Jawab
Baik memakai API maupun scraping, bersikaplah sebagai warga jaringan yang baik. Hormati rate limit, batasi laju permintaan, dan jangan pernah menggempur marketplace dengan hantaman paralel cepat dari satu alamat, karena trafik agresif akan membuat Anda diblokir dan bisa terlihat seperti serangan. Periksa robots.txt tiap situs, yang menandakan bagian mana yang diminta untuk tidak dikunjungi klien otomatis; sifatnya anjuran, bukan hukum, tetapi mengabaikannya pernah dijadikan bukti dalam sengketa pengadilan nyata.
Manfaatkan cache secara agresif agar Anda hanya mengambil yang perlu. Jika Anda mengecek sebuah listing tiap lima belas menit, jangan mengambil ulang halaman yang sama sepuluh kali untuk merender satu dashboard; simpan pembacaannya dan sajikan dari basis data Anda sendiri. Baca ketentuan layanan platform dengan jujur dan pahami bahwa harga yang terlihat publik tidak sama dengan izin untuk mengumpulkannya dalam skala besar.
Jangan anggap robots.txt atau URL publik sebagai izin menyeluruh. Berkas itu hanya bersifat anjuran, ketentuan layanan tetap bisa melarang pengumpulan otomatis, dan pelanggarannya pernah menjadi faktor dalam kasus hukum nyata, jadi tinjau aturannya sebelum Anda menaikkan skala.
Jebakan yang Perlu Diantisipasi
Sebagian besar proyek seperti ini tidak gagal di jalur mulus; mereka gagal di sisi-sisi ekstremnya. Mengenali jebakan umum sejak awal membuat Anda bisa mendesain agar terhindar darinya, bukan menemukannya di produksi saat seorang pelanggan sedang mengandalkan notifikasi Anda.
- Pertahanan anti-bot: CAPTCHA, pemblokiran IP, dan deteksi bot bisa mematahkan scraping dalam semalam dan memaksa pemeliharaan terus-menerus.
- Risiko hukum dan ToS: legalitas scraping berbeda antar yurisdiksi dan ketentuan layanan bisa melarangnya, jadi perjelas batasannya sebelum Anda membangun bisnis di atasnya.
- Kualitas data dan biaya: pencocokan produk yang salah, pembacaan basi, serta biaya komputasi dan proxy dari pengambilan yang sering, semuanya menggerus kepercayaan dan margin.
SaaS pemantau harga untuk penjual Tokopedia dan Shopee menyelesaikan masalah nyata yang tidak glamor, dan rekayasanya sebagian besar adalah pipeline data yang disiplin. Bagian sulitnya bukan kodenya, melainkan pertimbangannya: utamakan API resmi untuk data berizin, perlakukan scraping listing publik sebagai tradeoff hukum dan teknis yang sungguhan, dan jujurlah pada pelanggan soal area abu-abunya alih-alih berpura-pura tidak ada.