Bagaimana cara melakukan web scraping di TikTok pada tahun 2026?

TikTok merupakan sumber data yang melimpah: profil, tagar, statistik video, komentar. Web scraping memungkinkanmu mengekstrak semua itu secara otomatis. Ada dua cara yang bisa kamu gunakan: menggunakan sebuah alat siap pakai (tanpa kode) atau membuat kode sendiri pengikis di Python.

Berikut ini langkah-langkahnya, satu per satu, berdasarkan data yang dapat kamu peroleh dan ketentuan hukum yang berlaku.

Berbagai metode untuk melakukan scraping di TikTok

Untuk Pengikis TikTok, ada dua pendekatan utama. Pilihannya bergantung pada kemampuan teknismu dan tingkat kerumitan proyekmu.

• Gunakan alat yang dirancang khusus (tanpa kode).
• Membuat scraper sendiri dengan Python.

1. 1. Menggunakan alat bantu pengikisan web

Ini adalah pendekatan yang paling cepat dan mudah, sangat cocok jika kamu sama sekali tidak memiliki keterampilan dalam pemrograman. Alat-alat ini menawarkan solusi siap pakai dan menangani tantangan teknis untukmu: mengatasi sistem perlindungan anti-bot, rotasi proxy, pengelolaan sesi.

Berikut ini tiga di antaranya scraper TikTok efektif:

• Bright Data
• Apify
• Octoparse

Data Cerah

Data Cerah adalah solusi lengkap yang terkenal berkat layanan proxy-nya (residensial dan seluler) serta alat-alat scraping canggihnya: API khusus, dan peramban scraping terintegrasi. Produk ini Pengikis TikTok mengumpulkan data mengenai profil, video, postingan, dan tagar, tanpa perlu kamu mengurus bagian teknisnya. Hasilnya dapat diekspor ke JSON atau di CSV untuk hasil analisamu.

Ini adalah pilihan terbaik jika proyekmu membutuhkan volume yang besar dan infrastruktur yang andal. Kami akan membahasnya secara rinci dalam artikel kami ulasan lengkap dari Bright Data.

Apify

Apify adalah platform cloud untuk pengembangan pengikis mampu melakukan ekstraksi dalam skala besar. Sistemnya Pengikis TikTok mengumpulkan informasi terperinci: profil pengguna, komentar, tagar, musik yang terkait dengan video, serta metadata lengkap dari setiap postingan.

Ini adalah solusi yang paling fleksibel, sangat cocok jika kamu ingin menyesuaikan proses ekstraksi data atau mengotomatiskan tugas-tugas rutin di cloud. Data diekspor ke JSON Di mana CSV langsung dari antarmuka. Untuk detail lebih lanjut, lihat ulasan lengkap dari Apify.

Octoparse

Octoparse adalah solusi tanpa kode yang antarmuka visualnya memungkinkanmu membuat scraper hanya dengan beberapa klik, tanpa perlu menulis satu baris kode pun. Alat ini juga menawarkan sebuah templat TikTok Scraper siap pakai, yang kemudian bisa kamu sesuaikan sesuai kebutuhanmu.

Ini adalah pilihan yang paling terjangkau untuk seorang pemula bagi siapa saja yang ingin mengekstrak data dengan cepat. Untuk informasi lebih lanjut, baca artikel kami ulasan lengkap dari Octoparse.

2. Mengikis kode dengan Python

itu scraping menggunakan Python adalah pendekatan yang lebih teknis dan dapat disesuaikan, yang membutuhkan dasar-dasar pemrograman. Ini adalah solusi ideal jika kamu menginginkan sebuah kontrol total mengenai data yang akan diekstraksi, format keluaran (JSON, CSV) dan frekuensi permintaan. Berikut ini langkah-langkahnya, satu per satu.

Prasyarat

Pertama-tama, instal beberapa pustaka Python:

pip install requests beautifulsoup4 selenium scrapfly-sdk

Perintah ini menginstal :

• Requests Untuk Permintaan HTTP.
• BeautifulSoup4 untuk menganalisis Konten HTML.
• Selenium untuk mengelola halaman JavaScript jika perlu.
• scrapfly-sdk, SDK dari ScrapFly (opsi berbayar yang digunakan di bawah ini untuk menangani anti-bot dan proxy).

Metode yang digunakan di sini didasarkan pada ekstraksi data dari sebuah Profila tagar atau video melalui analisis respons JSON tersembunyi di halaman TikTok. TikTok menyisipkan data tersebut langsung ke dalam kode HTML melalui titik akhir internal, sehingga tidak perlu memanggil API resmi.

Langkah 1: menganalisis permintaan jaringan

• Buka alat pengembangan (F12) di perambanmu.
• Di dalam Network, perhatikan permintaan yang dimuat ketika kamu mengunjungi profil atau tagar di tiktok.com.
• Temukan’URL titik akhir internal : ini sering kali merupakan tag <script> yang berisi JSON, atau permintaan XHR ke URL seperti /api/. Kamu bisa menemukannya di tab Headers.
• URL inilah yang akan kamu gunakan dalam skripmu untuk mengekstrak data.

Langkah 2: mengirimkan permintaan dan menerima tanggapan

Setelah mendapatkan URL endpoint TikTok, gunakan Python untuk mensimulasikan permintaan dan mengambil respons JSON. Berikut ini adalah contoh yang disederhanakan dengan requests untuk mengambil JSON profil pengguna:

import requests
from parsel import Selector
import json

url = "https://www.tiktok.com/@pseudo"  # ganti dengan URL yang dituju
resp = requests.get(url, headers={
    "User-Agent": "Mozilla/5.0"
})
selector = Selector(resp.text)
data = selector.xpath("//script[@id='__UNIVERSAL_DATA_FOR_REHYDRATION__']/text()").get()
profile = json.loads(data)["__DEFAULT_SCOPE__"]["webapp.user-detail"]["userInfo"]
print(profile)

Kuncinya __UNIVERSAL_DATA_FOR_REHYDRATION__ adalah blok JSON yang disisipkan TikTok ke setiap halaman. Blok ini berisi metadata profil: jumlah pengikut, jumlah orang yang diikuti, biografi, dan ID pengguna. Metode ini terinspirasi dari contoh-contoh konkret yang didokumentasikan oleh ScrapFly.

Langkah 3: mengekstrak data yang relevan

Kemudian kamu bisa filter JSON agar hanya menyisakan hal-hal yang penting: nama pengguna, statistik keterlibatan, deskripsi. Berikut ini contohnya menggunakan ScrapFly untuk postingan TikTok :

from scrapfly import ScrapeConfig, ScrapflyClient
import json, jmespath

SCRAPFLY = ScrapflyClient(key="TA_CLE")
CONFIG = {"asp": True, "country": "US"}

def parse_post(response):
    sel = response.selector
    data = sel.xpath("//script[@id='__UNIVERSAL_DATA_FOR_REHYDRATION__']/text()").get()
    post = json.loads(data)["__DEFAULT_SCOPE__"]["webapp.video-detail"]["itemInfo"]["itemStruct"]
    return jmespath.search(
 """{
 id: id,
 desc: desc,
 author: author.{uniqueId, nickname},
        stats: stats
 }""",
 post
    )

async def scrape_posts(urls):
    to_scrape = [ScrapeConfig(url, **CONFIG) for url in urls]
    results = []
    async for resp in SCRAPFLY.concurrent_scrape(to_scrape):
 results.append(parse_post(resp))
    return results

Kode ini menunjukkan bagaimana menganalisis dengan benar data utama dari sebuah postingan: ID, deskripsi, penulis, dan statistik keterlibatan (suka, komentar, penayangan, dan pembagian). Hasilnya kemudian dapat dikonversi menjadi CSV untuk hasil analisamu.

Langkah 4: Mengelola iterasi dan paginasi

API internal TikTok sering kali hanya menampilkan sebagian kecil hasil dalam satu waktu. Untuk mendapatkan lebih banyak postingan atau komentar, kamu harus mengelola penomoran halaman dengan ikatan while, yang terus mengirimkan permintaan ke endpoint selama masih ada data yang harus dimuat.

cursor = 0
all_data = []
while True:
    params = {"count": 20, "cursor": cursor, "aweme_id": post_id}
    resp = requests.get(api_url, params=params)
    data = resp.json()
    comments = data.get("comments", [])
    all_data.extend(comments)
    if not data.get("total") or cursor >= data["total"]:
 break
    cursor += params["count"]

Di sini, parameter tersebut dimanfaatkan cursor untuk pembagian halaman melalui titik akhir internal komentar. Setiap iterasi mengambil sekumpulan 20 hasil hingga data habis seluruhnya.

Mengapa memo di TikTok?

Mengumpulkan data publik dari TikTok berguna untuk mengambil keputusan yang lebih baik, baik kamu bekerja di bidang pemasaran, data, maupun riset. Berikut adalah lima contoh penerapan konkret di mana pengambilan data dari TikTok benar-benar membuat perbedaan:

1. Analisis pasar: kamu perhatikan tren yang sedang berkembang (tagar yang sedang tren, lagu-lagu populer, niche konten). Dengan mengikuti tren yang sedang naik daun, kamu bisa mendeteksi sebuah topik sebelum topik tersebut menjadi terlalu ramai.
2. Pemasaran melalui influencer: Kamu mengidentifikasi kreator yang relevan untuk merekmu dengan membandingkan jumlah pengikut mereka, tingkat komitmen kinerja sebenarnya dan performa postingan mereka, alih-alih hanya mengandalkan angka yang ditampilkan.
3. Analisis sentimen: Kamu mengevaluasi persepsi terhadap suatu merek dengan mengumpulkan komentar di bawah video-video tersebut, untuk melihat apakah reaksi yang muncul secara umum bersifat positif, negatif, atau netral.
4. Penelitian akademis: data yang diekstraksi memungkinkan untuk mempelajari fenomena sosial atau budaya yang muncul di platform tersebut, disertai dengan contoh-contoh yang didukung data dan dapat direplikasi.
5. Pemantauan persaingan: Kamu memantau strategi konten pesaingmu dengan memperhatikan frekuensi posting mereka, format yang berhasil, dan video yang menghasilkan jumlah suka dan penayangan terbanyak.

Dalam semua kasus tersebut, kepatuhan terhadap Ketentuan Penggunaan TikTok dan RGPD Itu tetap menjadi tanggung jawabmu, terutama saat kamu menangani informasi yang berkaitan dengan pengguna yang dapat diidentifikasi.

FAQ

Apakah web scraping di TikTok legal?

Ini adalah masalah yang cukup rumit. Secara umum, pengambilan data publik di TikTok tidak ilegal, tetapi kamu harus mematuhi dua hal: ketentuan penggunaan TikTok, yang melarang pengumpulan data secara otomatis dalam Ketentuan Layanan (KL) mereka, serta undang-undang tentang perlindungan data pribadi seperti RGPD di Eropa.

Secara praktis, mengekstrak informasi publik (tagar, tren, statistik agregat) tidak menimbulkan masalah sebesar mengumpulkan data yang dapat diidentifikasi (alamat email, profil yang dapat diidentifikasi). Jika kamu menyimpan data pribadi, kamu bertanggung jawab sesuai dengan GDPR. Untuk detail lebih lanjut, bacalah artikel kami tentang legalitas web scraping.

Apa saja alat dan perangkat lunak terbaik untuk mengikis TikTok?

Semuanya tergantung pada kebutuhanmu dan kemampuan teknismu.

• Untuk memulai tanpa perlu menulis kode: Octoparse adalah solusi yang paling sederhana, dengan antarmuka visualnya.
• Untuk proyek berskala besar: Bright Data unggul berkat proxy bawaan dan infrastruktur anti-pemblokiran yang dimilikinya.
• Untuk mengotomatisasi di cloud: Apify menawarkan Pengikis TikTok siap pakai dengan fitur ekspor ke JSON Di mana CSV.

Jika kamu lebih suka menulis kode sendiri, Python dengan pustaka seperti Selenium atau SDK ScrapFly memberimu kendali paling besar atas proses ekstraksi yang kamu lakukan. Untuk perbandingan terperinci (harga, kelebihan, keterbatasan), baca artikel kami tentang alat pengikis web terbaik.

Data apa saja yang dapat diekstrak dari TikTok?

Kamu bisa mengumpulkan berbagai macam informasi publik di TikTok:

• Profil pengguna: nama, biografi, jumlah pengikut, user id, jumlah pengikut
• Metadata video dan postingan: deskripsi, durasi, tanggal publikasi, musik yang menyertainya
• Tagar dan tren terkini
• Statistik keterlibatan: suka, bagikan, komentar, tampilan

Semua data tersebut dikirimkan kembali dalam format terstruktur (JSON), mudah diubah menjadi CSV untuk hasil analisamu.

Bagaimana cara mengatasi perlindungan anti-bot TikTok?

TikTok menerapkan sejumlah langkah untuk pengikis blok, terutama verifikasi JavaScript dan pendeteksian alamat IP yang mencurigakan. Perlindungan ini tetap dapat dikelola dengan menerapkan praktik terbaik:

• Menggunakan proksi berputar untuk mengganti alamat IP pada setiap permintaan.
• Meniru perilaku peramban sungguhan dengan Selenium.
• Menambahkan penundaan acak di antara permintaan agar server tidak kelebihan beban.

Semakin cepat kamu melakukan scraping, semakin besar risiko terdeteksi. Kecepatan yang wajar akan melindungi TikTok sekaligus aksesmu sendiri.