ByteDance entwickelt künstliche Intelligenzmodelle, um in China konkurrieren, der Bot, der zum Training dieser Modelle zum Scrapen von Daten verwendet wird, erfährt Berichten einen Spitzenwert in der Aktivität.
Der TikTok-Besitzer hat seinen eigenen Web-Scraper eingeführt,Bytespider, im April, und es scrapt jetzt Daten um ein Vielfaches schneller als Bots anderer Unternehmen, berichtete Fortune unter Berufung auf Untersuchungen von Kasada, einem Bot-Management-Unternehmen, und Dark Visitors, einem Monitor für Scraper-Bots. Unternehmen, die KI-Modelle entwickeln, wie etwa Google (GOOGL) und Meta (META
)
, verwenden Sie Scraper-Bots zum Erfassen von Daten zum Training und Verbessern der Große Sprachmodelle (LLMs) und multimodale Modelle, die die KI-Dienste der Unternehmen antreiben.
Bytespider sammelt Webdaten etwa 25-mal schneller als OpenAIs Web-Scraper GPTbot, sagte Sam Crowther, CEO von Kasada, gegenüber Fortune. Im Vergleich zu Anthropics ClaudeBot ist Bytespider 3.000-mal schneller.
Wie die Bots von OpenAI und Anthropic ignoriert Bytespider
Anweisungen aus robots.txt, eine nicht rechtsverbindliche Codezeile, die Web-Scrapern mitteilt, auf welche Daten auf einer Website sie abrufen können und nicht können, berichtete Fortune. Den Daten von Kasada entsprechend hat Bytespider in den letzten sechs Wochen Spitzen bei der Scraping-Aktivität aufgewiesen.„Es ist, als würden sie verzweifelt versuchen, aufzuholen“, sagte Crowther gegenüber Fortune. ByteDance antwortete nicht sofort auf eine Bitte um einen Kommentar.Das in China ansässige Unternehmen veröffentlichte seine KI-gestützter Chatbot, Doubao, im vergangenen August, und es erweist sich als harter Konkurrent für den einheimischen Rivalen Baidu.
(BIDU) Ernie Bot. Im Mai führte ByteDance eine Reihe von Doubao LLMs für Unternehmen ein, die kosten weniger als die Modelle der chinesischen Konkurrenten
. Nun plant ByteDance, Bauen Sie ein neues KI-Modell mit Chips des chinesischen Unternehmens Huawei, berichtete Reuters unter Berufung auf drei namentlich nicht genannte Personen, die mit der Angelegenheit vertraut sind. Ein Sprecher von ByteDance hatte Quartz jedoch zuvor mitgeteilt, dass das Unternehmen kein neues KI-Modell entwickeln. Das Unternehmen hat auch entwarf zwei KI-Chips mit Taiwan Semiconductor Manufacturing Company
Dieser Inhalt wurde maschinell aus dem Originalmaterial übersetzt. Aufgrund der Nuancen der automatisierten Übersetzung können geringfügige Unterschiede bestehen. Für die Originalversion klicken Sie hier