Мислим да до тада неће бити дуго OpenAI такође ће доћи у игру за развој претраживача заснованог на вештачкој интелигенцији. Нови web crawler GPTBot cu modeшироки језик ГПТ-5 је већ објављен.
Они који користе ChatGPT знам ово modeл широког језика (LLM) тренутно ради GPT-3.5, који се обучава о скупу података ажурираном у септембру 2021. Дакле, ако се траже новије информације од овог датума, ChatGPT није у могућности да пружи тачне информације. Наравно, важи за бесплатну верзију која не подржава употребу помоћних додатака.
Са лансирањем GPTBot, OpenAI има отворен пут за индексирање веб страница кроз ово ново web crawler. Као што то већ дуги низ година раде компаније као што су Гоогле, Мицрософт, Иахоо и многе друге.
ГПТ-5 и нови web crawler GPTBot развијен OpenAI
нови web crawler GPTBot користи web agent:
User agent token: GPTBot
Full user-agent string: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)Власници веб локација могу да контролишу индексирање веб страница преко датотеке robots.txt, користећи исте директиве као и за друге web crawlerи других компанија.
На пример, ако власник веб странице то не жели OpenAI за прикупљање информација са сајта, може додати robots.txt линије:
User-agent: GPTBot
Disallow: /Чак и ако се тако понаша web crawler, GPTBot имаће јасну сврху: прикупљање јавно доступних података уз пажљиво избегавање извора који укључују паивалл, прикупљање личних података или садржај који крши смернице OpenAI.
Али постоји доста контроверзи, од којих су неке чак и покренуле судски поступак против компаније OpenAI о приватности и коришћењу садржаја без сагласности аутора или без навођења извора.
У јуну је јапански регулатор приватности издао упозорење за OpenAI у вези са неовлашћеним прикупљањем података. Италија је такође привремено забранила употребу раније ове године ChatGPT због наводних кршења закона о приватности Европске уније.
