Meta dreht Wissenschafts-KI Galactica nach 3 Tagen wieder ab
19. Nov. 2022, 21:34 | 0 KommentareAuf Sprachbefehl sollte Galactica wissenschaftliche Artikel ausspucken, erfand aber Inhalte und stellte sie als Fakten dar.
Facebook-Mutterkonzern Meta ist mit einem neuen Projekt vorerst in eine Pleite geschlittert. Diese Woche wurde ein großes Sprachmodell namens Galactica vorgestellt. Die sprachgesteuerte künstliche Intelligenz sollte Wissenschaftler*innen bei der Recherche und dem Verfassen von Texten helfen. Nach nur drei Tagen wurde der Demonstrator des Programms von Meta jedoch wieder offline genommen, nachdem es scharf kritisiert worden war.
Michael Black @Michael_J_Black
I asked #Galactica about some things I know about and I'm troubled. In all cases, it was wrong or biased but sounded right and authoritative. I think it's dangerous. Here are a few of my experiments and my analysis of my concerns. (1/9)
Am 17. November, 2022 um 7:47 via ✕
I asked #Galactica about some things I know about and I'm troubled. In all cases, it was wrong or biased but sounded right and authoritative. I think it's dangerous. Here are a few of my experiments and my analysis of my concerns. (1/9)
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
I entered "Estimating realistic 3D human avatars in clothing from a single image or video". In this case, it made up a fictitious paper and associated GitHub repo. The author is a real person (@AlbertPumarola) but the reference is bogus. (2/9) https://t.co/N4i0BX27Yf
Am 17. November, 2022 um 7:47 via ✕
I entered "Estimating realistic 3D human avatars in clothing from a single image or video". In this case, it made up a fictitious paper and associated GitHub repo. The author is a real person (@AlbertPumarola) but the reference is bogus. (2/9) https://t.co/N4i0BX27Yf
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
Then I tried "Accurate estimation of body shape under clothing from an image". It produces an abstract that is plausible but refers to Alldieck et al. "Accurate Estimation of Body Shape Under Clothing from a Single Image" Which does not exist. (3/9) https://t.co/g1Eq0Dn0sB
Am 17. November, 2022 um 7:47 via ✕
Then I tried "Accurate estimation of body shape under clothing from an image". It produces an abstract that is plausible but refers to Alldieck et al. "Accurate Estimation of Body Shape Under Clothing from a Single Image" Which does not exist. (3/9) https://t.co/g1Eq0Dn0sB
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
.@thiemoall publishes in the area (excellent work BTW) so it's on the right track but it has made up this reference. Based on these few tests, I think #Galactica is 1) an interesting research project, 2) not useful for doing science (stick with wikipedia), 3) dangerous. (4/9)
Am 17. November, 2022 um 7:47 via ✕
.@thiemoall publishes in the area (excellent work BTW) so it's on the right track but it has made up this reference. Based on these few tests, I think #Galactica is 1) an interesting research project, 2) not useful for doing science (stick with wikipedia), 3) dangerous. (4/9)
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
Why dangerous? Galactica generates text that's grammatical and feels real. This text will slip into real scientific submissions. It will be realistic but wrong or biased. It will be hard to detect. It will influence how people think. (5/9)
Am 17. November, 2022 um 7:47 via ✕
Why dangerous? Galactica generates text that's grammatical and feels real. This text will slip into real scientific submissions. It will be realistic but wrong or biased. It will be hard to detect. It will influence how people think. (5/9)
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
It offers authoritative-sounding science that isn't grounded in the scientific method. It produces pseudo-science based on statistical properties of science *writing*. Grammatical science writing is not the same as doing science. But it will be hard to distinguish. (6/9)
Am 17. November, 2022 um 7:47 via ✕
It offers authoritative-sounding science that isn't grounded in the scientific method. It produces pseudo-science based on statistical properties of science *writing*. Grammatical science writing is not the same as doing science. But it will be hard to distinguish. (6/9)
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
This could usher in an era of deep scientific fakes. Alldieck and Pumarola will get citations to papers they didn't write. These papers will then be cited by others in real papers. What a mess this will be. (7/9)
Am 17. November, 2022 um 7:47 via ✕
This could usher in an era of deep scientific fakes. Alldieck and Pumarola will get citations to papers they didn't write. These papers will then be cited by others in real papers. What a mess this will be. (7/9)
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
I'm sure the authors are aware of the dangers. Every generation comes with the fine print "WARNING: Outputs may be unreliable! Language Models are prone to hallucinate text." But Pandora's box is open and we won't be able to stuff the text back in. (8/9)
Am 17. November, 2022 um 7:47 via ✕
I'm sure the authors are aware of the dangers. Every generation comes with the fine print "WARNING: Outputs may be unreliable! Language Models are prone to hallucinate text." But Pandora's box is open and we won't be able to stuff the text back in. (8/9)
Am 17. November, 2022 um 7:47 via ✕
Michael Black @Michael_J_Black
I applaud the ambition of this project but caution everyone about the hype surrounding it. This is not a great accelerator for science or even a helpful tool for science writing. It is potentially distorting and dangerous for science. (9/9)
Am 17. November, 2022 um 7:47 via ✕
I applaud the ambition of this project but caution everyone about the hype surrounding it. This is not a great accelerator for science or even a helpful tool for science writing. It is potentially distorting and dangerous for science. (9/9)
Am 17. November, 2022 um 7:47 via ✕
Mehr dazu findest Du auf futurezone.at
Kurze URL:
Das könnte Dich auch interessieren:
Auf Instagram und Threads sind systematisch Konten gesperrt worden, mit denen sich die Flugzeuge von Prominenten verfolgen ließen.
Der Produktchef von Meta, Chris Cox, äußert scharfe Kritik an den Datenschutzbestimmungen der EU-Kommission, die KI-Innovationen verhindere.
Ähnliche News:
Meta muss 91 Millionen Euro Strafe zahlen
Meta streicht Pläne für günstigeren Apple-Vision-Pro-Konkurrenten
Meta blockiert Whatsapp-Konten nach Hackerangriffen
Meta hat Milliarden mit Virtual Reality verloren
Meta-KI leugnet Trump-Attentat
Facebook-Mutter Meta will bei weltgrößter Brillenfirma einsteigen
EU-Verbraucherschützer prüfen Meta-Bezahlmodell
Deshalb muss Meta in Nigeria 220 Millionen Dollar Strafe zahlen
Meta gibt Europa keine neuen KI-Modelle mehr
Apple könnte KI von Meta in seine Geräte integrieren
Meta streicht Pläne für günstigeren Apple-Vision-Pro-Konkurrenten
Meta blockiert Whatsapp-Konten nach Hackerangriffen
Meta hat Milliarden mit Virtual Reality verloren
Meta-KI leugnet Trump-Attentat
Facebook-Mutter Meta will bei weltgrößter Brillenfirma einsteigen
EU-Verbraucherschützer prüfen Meta-Bezahlmodell
Deshalb muss Meta in Nigeria 220 Millionen Dollar Strafe zahlen
Meta gibt Europa keine neuen KI-Modelle mehr
Apple könnte KI von Meta in seine Geräte integrieren
Weitere News:
Tesla mit höchster Rate tödlicher Unfälle
Valve: Steam ändert massiv den Umgang mit Season Pass und DLC
aleX fotografiert: Ein Wintermärchen am Obertrumer See
Palo Alto Networks: Rund 2.000 Firewalls von Hackern infiltriert
Lästiger App-Bug: Update und Deinstallation unter Windows 10 nicht möglich
Knapp vor 100.000 Dollar: Bitcoin weiter auf Rekordjagd
Microsoft: Flight Simulator 2024 wird "Größtenteils negativ" bewertet
Wegen Sicherheitslücke: D-Link drängt auf Entsorgung älterer Router
US-Regierung will Chrome vom Rest des Konzerns abspalten
Windows 11: Lautstärke unerwartet voll aufgedreht
Valve: Steam ändert massiv den Umgang mit Season Pass und DLC
aleX fotografiert: Ein Wintermärchen am Obertrumer See
Palo Alto Networks: Rund 2.000 Firewalls von Hackern infiltriert
Lästiger App-Bug: Update und Deinstallation unter Windows 10 nicht möglich
Knapp vor 100.000 Dollar: Bitcoin weiter auf Rekordjagd
Microsoft: Flight Simulator 2024 wird "Größtenteils negativ" bewertet
Wegen Sicherheitslücke: D-Link drängt auf Entsorgung älterer Router
US-Regierung will Chrome vom Rest des Konzerns abspalten
Windows 11: Lautstärke unerwartet voll aufgedreht
Einen Kommentar schreiben
Kommentare
Bitte bleibe sachlich und fair in deinen Äußerungen. Sollte dein Kommentar nicht sofort erscheinen, ist er in der Warteschlange gelandet und wird meist zeitnah freigeschaltet.
(0)
Bitte bleibe sachlich und fair in deinen Äußerungen. Sollte dein Kommentar nicht sofort erscheinen, ist er in der Warteschlange gelandet und wird meist zeitnah freigeschaltet.
Kommentare:
Du hast bereits für diesen
Kommentar abgestimmt...
;-)
© by Ress Design Group, 2001 - 2024