Backend
Marketplace Price Monitoring SaaS: Tokopedia and Shopee
April 20268 menit baca
Ini adalah layanan yang otomatis melacak harga dan tingkat stok kompetitor di marketplace seperti Tokopedia dan Shopee. Layanan ini mengambil listing secara terjadwal, mencatat pergerakan harga dari waktu ke waktu, dan memberi tahu penjual saat kompetitor mengubah harga atau kehabisan stok, sehingga penjual bisa bereaksi cepat tanpa mengecek halaman secara manual.
Gunakan API resmi penjual untuk produk, pesanan, dan stok milik penjual itu sendiri, karena datanya berizin, terstruktur, dan andal. Scraping halaman listing publik sering menjadi satu-satunya cara melihat harga kompetitor, tetapi rapuh dan sensitif secara hukum. Utamakan API resmi di mana pun datanya memang berhak Anda baca.
Tergantung yurisdiksi dan ketentuan layanan platform, dan ini benar-benar area abu-abu. Putusan pengadilan soal scraping beragam, dan harga yang terlihat publik tidak berarti Anda punya izin mengumpulkannya dalam skala besar. Tinjau ketentuan layanan dan robots.txt sebelum membangun bisnis di atas data hasil scraping.
Scheduler mengambil tiap listing terpantau pada interval tertentu. Langkah deteksi perubahan membandingkan harga dan stok baru dengan nilai tersimpan terakhir dan bertindak hanya jika ada perbedaan nyata. Tiap pembacaan disimpan dengan cap waktu untuk riwayat, dan sebuah perubahan memicu notifikasi WhatsApp atau email serta pembaruan di dashboard.
Hormati rate limit, batasi dan sebar permintaan Anda, dan jangan pernah menghantam situs dengan trafik paralel cepat dari satu alamat. Periksa robots.txt, manfaatkan cache agar hanya mengambil yang perlu, dan baca ketentuan layanan platform. Bersikap sebagai klien yang sopan mengurangi baik pemblokiran maupun risiko hukum.
Ringkasan Utama
SaaS pemantau harga marketplace melacak harga dan stok kompetitor di Tokopedia dan Shopee agar penjual bisa bereaksi cepat. Membangunnya berarti memilih antara API resmi penjual atau scraping halaman publik, menjalankan job terjadwal yang mendeteksi perubahan, menyimpan riwayat harga, dan mengirim notifikasi lewat WhatsApp atau email, sambil menghormati rate limit dan ketentuan platform.
Penjual di Tokopedia dan Shopee bersaing di harga, tetapi hampir tidak ada yang bisa melihat berapa harga rival mereka secara real time. Mereka mengecek beberapa halaman kompetitor secara manual, melewatkan flash sale, dan kehilangan penjualan hari itu. Titik buta ini adalah masalah nyata yang berulang, dan justru inilah jenis masalah yang bisa diselesaikan oleh SaaS kecil.
Artikel ini membahas bagaimana Anda benar-benar membangun layanan pemantau harga dan stok kompetitor untuk penjual marketplace di Indonesia. Kita akan bahas dua cara mendapatkan datanya beserta tradeoff-nya, pipeline pemantauan yang mengubah harga mentah menjadi notifikasi, cara menjalankannya secara bertanggung jawab, serta jebakan yang sering menggagalkan proyek seperti ini, termasuk area abu-abu hukum seputar scraping yang tidak boleh Anda sepelekan.
Seorang penjual online memasang harga tetap untuk produknya, padahal pasar di bawahnya bergerak tiap jam. Kompetitor menurunkan harga untuk kampanye, kehabisan stok, atau meluncurkan bundling, dan penjual baru sadar ketika penjualannya sendiri turun. Price intelligence, yaitu praktik memahami dinamika harga di tingkat pasar dan dampaknya pada bisnis, biasanya hanya terjangkau oleh peritel besar. Penjual kecil terpaksa menyegarkan halaman kompetitor secara manual.
Kesenjangan itulah peluangnya. Alat sederhana yang mengawasi segelintir listing kompetitor, mencatat pergerakan harga dan stok mereka dari waktu ke waktu, dan memberi tahu penjual begitu ada perubahan, benar-benar berguna. Nilainya bukan pada analitik canggih di hari pertama; cukup menghilangkan pengecekan manual dan tidak pernah lagi ketinggalan langkah kompetitor.
Ada dua cara jujur untuk mendapatkan data, dan keduanya menyelesaikan masalah yang berbeda. API resmi marketplace, seperti Tokopedia Seller API dan Shopee Open Platform, terautentikasi lewat OAuth2 dan memberi data yang bersih serta andal, tetapi dirancang agar seorang penjual mengelola tokonya sendiri, bukan untuk membaca angka pribadi kompetitor. API adalah pilihan tepat untuk produk, stok, dan pesanan milik penjual itu sendiri, di mana Anda punya izin dan respons yang terstruktur stabil.
Data kompetitor biasanya hanya ada di halaman listing publik, sehingga banyak pengembang beralih ke scraping halaman tersebut. Scraping memberi Anda harga dan stok kompetitor yang tidak akan diberikan API mana pun, tetapi ia rapuh dan sensitif secara hukum. Tata letak halaman berubah tanpa peringatan, marketplace memasang pertahanan anti-bot, dan ketentuan layanan platform bisa melarang pengumpulan otomatis. Perlakukan scraping sebagai tradeoff serius, bukan jalan pintas gratis, dan andalkan API resmi di mana pun datanya memang berhak Anda baca.
Gunakan API resmi penjual untuk katalog dan pesanan milik penjual itu sendiri, di mana datanya berizin dan terstruktur, dan sisakan scraping hanya untuk listing kompetitor publik yang benar-benar tidak bisa Anda peroleh dengan cara lain.
Begitu Anda bisa mengambil satu harga, produk ini pada dasarnya adalah pipeline data kecil. Tiap bagian sederhana secara sendiri-sendiri, dan nilainya muncul saat semuanya dirangkai menjadi loop andal yang berjalan tanpa pengawasan dan hanya mengganggu penjual ketika ada yang benar-benar berubah.
Baik memakai API maupun scraping, bersikaplah sebagai warga jaringan yang baik. Hormati rate limit, batasi laju permintaan, dan jangan pernah menggempur marketplace dengan hantaman paralel cepat dari satu alamat, karena trafik agresif akan membuat Anda diblokir dan bisa terlihat seperti serangan. Periksa robots.txt tiap situs, yang menandakan bagian mana yang diminta untuk tidak dikunjungi klien otomatis; sifatnya anjuran, bukan hukum, tetapi mengabaikannya pernah dijadikan bukti dalam sengketa pengadilan nyata.
Manfaatkan cache secara agresif agar Anda hanya mengambil yang perlu. Jika Anda mengecek sebuah listing tiap lima belas menit, jangan mengambil ulang halaman yang sama sepuluh kali untuk merender satu dashboard; simpan pembacaannya dan sajikan dari basis data Anda sendiri. Baca ketentuan layanan platform dengan jujur dan pahami bahwa harga yang terlihat publik tidak sama dengan izin untuk mengumpulkannya dalam skala besar.
Jangan anggap robots.txt atau URL publik sebagai izin menyeluruh. Berkas itu hanya bersifat anjuran, ketentuan layanan tetap bisa melarang pengumpulan otomatis, dan pelanggarannya pernah menjadi faktor dalam kasus hukum nyata, jadi tinjau aturannya sebelum Anda menaikkan skala.
Sebagian besar proyek seperti ini tidak gagal di jalur mulus; mereka gagal di sisi-sisi ekstremnya. Mengenali jebakan umum sejak awal membuat Anda bisa mendesain agar terhindar darinya, bukan menemukannya di produksi saat seorang pelanggan sedang mengandalkan notifikasi Anda.
SaaS pemantau harga untuk penjual Tokopedia dan Shopee menyelesaikan masalah nyata yang tidak glamor, dan rekayasanya sebagian besar adalah pipeline data yang disiplin. Bagian sulitnya bukan kodenya, melainkan pertimbangannya: utamakan API resmi untuk data berizin, perlakukan scraping listing publik sebagai tradeoff hukum dan teknis yang sungguhan, dan jujurlah pada pelanggan soal area abu-abunya alih-alih berpura-pura tidak ada.