Slo-Tech - Raziskovalci iz podjetja za računalniško varnost CrowdStrike so želeli preveriti, ali imajo veliki jezikovni modeli vgrajene kakšne predsodke svojih avtorjev, ki bi se izrazili na primer pri pisanju kode. Ugotovili so, da vsaj za kitajski DeepSeek - drugih niso preverjali - to še kako drži. Koda, ki jo piše za kitajski vladi neljube naročnike, ima več varnostnih lukenj. Zdi se neverjetno, da bi šlo za naključje.
DeepSeeku so dali več zelo podobnih navodil, vsa v angleščini, naj napiše določeno programsko kodo. Med drugim je šlo za kodo, ki bi se lahko uporabljala za nadzor industrijskih procesov (SCADA). Da umetna inteligenca piše dobro, a ne popolne kode, vemo že dolgo. CrowdStrike je ocenil, da so bile v 23 odstotkih kode resne napake oziroma ranljivosti. To je povprečje, ki pa se zelo spremeni, če DeepSeeku rečemo, da smo iz Tibeta ali kaj podobnega.
Ko so v navodila dodali pojasnilo, da bo kodo poganjalo prepovedano gibanje Falun Gong ali pa da se bo uporabljala v Islamski državi, je delež napak zrasel na 45 odstotkov. Tudi če je bil kot avtor naveden Tajvan ali Tibet, je bila koda nevarnejša. DeepSeek ni nikoli izrecno omenil, da kodo kakorkoli prilagaja ali kako drugače namignil, da upošteva njen namen. A eksperiment jasno kaže, da te pristranskosti obstajajo.
Novice » Znanost in tehnologija » DeepSeek piše manj varno kodo za naročnike v kitajski nemilosti

twom ::
Morda pa..., glede na to da se AI "uči" od do sedaj napisanega..., da imajo kode, ki se uporabljajo na teh območjih več varnostnih lukenj.

fikus_ ::
Ok, sedaj pa naj še z enakimi vatli preverijo kakšen zahoden LLM, da vidimo primerjavo.
Učite se iz preteklosti, živite v sedanjosti in razmišljajte o prihodnosti.
PS Ne odgovarjam trolom in provokatorjem!
PS Ne odgovarjam trolom in provokatorjem!

JanBrezov ::
zanimivo, ampak za kaj bi nekdo orodju razlagal, kje/za kaj rabi neko stvar...
Sem bil na par predavanjih o uporabi AI in pogost nasvet je bil, da AI ne samo vprašaš, ampak mu predlagaš, v kakšno vlogo se naj postavi oz. v kakšni vlogi si ti kot spraševalec, saj da to pomembno vpliva na kvaliteto odgovora.
Sploh pa vprašanje ni samo to, kar vprašaš, ampak tudi kdo/od kod sprašuje. Za vsak AI bi bilo smiselno podvomiti o kvaliteti odgovorov, sploh za take, ki jih pripravljajo režimi ala Kitajska.
Vredno ogleda ...
Tema | Ogledi | Zadnje sporočilo | |
---|---|---|---|
Tema | Ogledi | Zadnje sporočilo | |
» | DeepSeek je na internetu pozabil javno dostopno bazo svojih podatkovOddelek: Novice / Zasebnost | 8986 (2347) | SmeskoSnezak |
» | Južna Koreja umaknila aplikacijo DeepSeekOddelek: Novice / Zasebnost | 2985 (1763) | LeQuack |
» | Kitajska družba DeepSeek razburkala področje umetne inteligence s poceni jezikovnim m (strani: 1 2 3 4 )Oddelek: Novice / Ostala programska oprema | 21522 (10837) | kanarin |
» | kaj pravi chat gpt o deepseek r1 (strani: 1 2 )Oddelek: Loža | 7586 (4437) | delavec44 |