Saya tidak berpikir itu akan lama sampai saat itu OpenAI itu juga akan berperan untuk pengembangan mesin pencari berbasis kecerdasan buatan. Yang baru web crawler GPTBot cu modebahasa luas GPT-5 sudah dirilis.
Mereka yang menggunakan ChatGPT saya tahu ini model bahasa yang luas (LLM) sedang berjalan GPT-3.5, sedang dilatih tentang kumpulan data yang diperbarui pada September 2021. Jadi, jika informasi yang lebih baru diminta dari tanggal ini, ChatGPT tidak dapat memberikan informasi yang akurat. Tentu saja, berlaku untuk versi gratis yang tidak mendukung penggunaan plugin tambahan.
Dengan peluncuran GPTBot, OpenAI memiliki cara terbuka untuk pengindeksan halaman web melalui yang baru ini web crawler. Seperti yang telah dilakukan perusahaan seperti Google, Microsoft, Yahoo dan banyak lainnya selama bertahun-tahun.
GPT-5 dan web crawler baru GPTBot yang dikembangkan oleh OpenAI.
baru web crawler GPTBot memanfaatkan web agent:
User agent token: GPTBot
Full user-agent string: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)Pemilik situs web dapat mengontrol pengindeksan halaman web melalui file robots.txt, menggunakan arahan yang sama seperti yang lainnya web crawlerdan dari perusahaan lain.
Misalnya, jika pemilik situs web tidak menginginkan hal itu OpenAI untuk mengumpulkan informasi dari situs, dapat menambahkan robots.txt garis:
User-agent: GPTBot
Disallow: /Bahkan jika dia bertindak seperti itu web crawler, GPTBot akan memiliki tujuan yang berbeda: untuk mengambil data yang tersedia secara publik sambil dengan hati-hati menghindari sumber yang melibatkan paywalls, pengumpulan data pribadi, atau konten yang melanggar kebijakan OpenAI.
Namun cukup banyak kontroversi, bahkan ada yang sampai menyeret perusahaan tersebut ke jalur hukum OpenAI tentang privasi dan penggunaan konten tanpa persetujuan penulis atau tanpa mengidentifikasi sumbernya.
Pada bulan Juni, regulator privasi Jepang mengeluarkan peringatan kepada OpenAI tentang pengumpulan data yang tidak sah. Italia juga sementara melarang penggunaan awal tahun ini ChatGPT karena dugaan pelanggaran undang-undang privasi Uni Eropa.
