Parser User Agent

Apa itu string user agent?

String user agent (UA) adalah teks yang dikirim browser atau klien HTTP lewat header request User-Agent untuk memperkenalkan dirinya. Server memakainya untuk analytics, mengatasi bug, mengelola bot, dan menyajikan file unduhan yang sesuai. Contoh string Chrome di Windows biasanya terlihat seperti ini:

Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/130.0.0.0 Safari/537.36

String ini penuh warisan sejarah: setiap browser mengaku sebagai “Mozilla/5.0”, Chrome menyebut Safari dan Gecko, dan Edge menambahkan Edg/ ke string Chrome. Karena itu, parsing yang akurat harus memeriksa token dalam urutan yang tepat, yaitu Edge sebelum Chrome, dan Chrome sebelum Safari.

Cara kerja parser ini

• Bot lebih dulu: puluhan token crawler dicocokkan, termasuk mesin pencari (Googlebot, Bingbot, YandexBot, Applebot), crawler AI (GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot, CCBot, Bytespider), pratinjau media sosial (facebookexternalhit, Twitterbot, Slackbot), alat SEO, dan library HTTP (curl, python-requests, Go-http-client).
• Browser: browser spesifik (Edge, Opera, Samsung Internet, Vivaldi, Yandex, dan browser dalam aplikasi) diperiksa sebelum token umum Chrome, Firefox, dan Safari.
• Engine: Blink untuk browser berbasis Chromium, Gecko untuk Firefox, dan WebKit untuk Safari. Di iOS, semua browser memakai WebKit karena Apple mewajibkannya (di luar Uni Eropa).
• OS & perangkat: versi Windows NT dipetakan ke nama, versi iOS dan Android diambil, dan jenis perangkat ditentukan dari token seperti Mobile, iPad, atau SMART-TV.

Batasan deteksi user agent

Browser kini “membekukan” sebagian string demi privasi. Chrome melaporkan nomor versi kecil sebagai .0.0.0, Chrome di Android mengirim Android 10; K alih-alih versi dan model yang sebenarnya, Windows 11 tetap menulis Windows NT 10.0, dan Safari melaporkan macOS sebagai 10_15_7. Nilai yang akurat hanya bisa didapat lewat User-Agent Client Hints (header Sec-CH-UA-* atau navigator.userAgentData), yang juga dibaca alat ini untuk browser kamu. Selain itu, klien mana pun bisa mengirim string apa pun, jadi jangan pernah memakai UA untuk keputusan keamanan.

Memverifikasi lalu lintas Googlebot asli

Scraper sering berpura-pura menjadi Googlebot. Untuk memverifikasi, lakukan reverse DNS lookup pada IP pengunjung (hostname-nya harus berakhiran googlebot.com, google.com, atau googleusercontent.com), lalu forward lookup pada hostname tersebut, yang harus mengembalikan IP yang sama. Kamu bisa menjalankan keduanya dengan DNS Lookup kami. Untuk mengecek crawler AI mana yang diizinkan robots.txt kamu, gunakan AI Crawler Checker.

Juga dicari sebagai: user agent parser, cek user agent, user agent string, apa itu user agent, deteksi browser, deteksi bot, googlebot user agent, gptbot.

Tool yang cocok dipakai bersama Parser User Agent

• Cek IP Address Saya — IP address publik kamu dan semua informasi yang diperlihatkan browser ke situs yang kamu kunjungi: user agent, layar, bahasa, zona waktu, dan header permintaan.
• Penguji Robots.txt — Cek apakah URL diizinkan atau diblokir untuk Googlebot, Bingbot, GPTBot, dan crawler lain, lihat aturan mana yang cocok, lalu edit file untuk menguji perubahan sebelum kamu deploy.
• Cek HTTP Header — Ambil URL apa pun dan lihat persis apa yang dikirim server — status code, rantai redirect, dan setiap header respons, lengkap dengan penjelasan sederhana untuk header yang penting bagi SEO, caching, dan keamanan.
• Analisis Header Email — Tempel header mentah dari email untuk melihat seluruh perjalanannya: setiap lompatan server beserta waktu tempuhnya, hasil SPF, DKIM dan DMARC, IP asal, serta tanda bahaya seperti Reply-To atau Return-Path yang tidak cocok.