OpenAI 爬蟲頻繁抓取導致人體3D模型網站癱瘓
近日,烏克蘭一家專注於人體3D 模型的網站 Trilegangers 遭遇了前所未有的流量攻擊,導致其服務器癱瘓。該網站致力於爲3D 藝術家和遊戲開發者提供海量的人體3D 模型數據,然而卻因爲 OpenAI 的爬蟲 GPTBot 的頻繁抓取而陷入困境。據 Trilegangers 的工作人員透露,儘管網站在使用協議中明確禁止未經授權的抓取和使用,但由於未正確設置 robots.txt 文件來阻止爬蟲的訪問,最終導致了服務器負荷過重。根據服務器日誌,OpenAI 的 GPTBot 爬蟲通過600多個不同的 IP 地址發起了數以萬計的請求,結果使得