avedelphina on Nostr: Tohle krásně ukazuje základní problém s aktuální implementací AI. Ten ...
Tohle krásně ukazuje základní problém s aktuální implementací AI. Ten problém není to, že jsou lidé schopni vygenerovat falešný pas, který projde KYC procesem. Problém je v tom, že tuhle funkci dokáže někdo vypnout.
Používám tyhle nástroje relativně dlouho, zejména na jednoduché úkoly jako psaní jednoúčelových skriptů nebo generování sumářů pro dokumentaci. S každým dalším updatem jsou tyhle základní schopnosti horší a horší. Jednoduchý skript pro Intune, který dělá jednu konkrétní úplně tupou věc, dřív zabral dvě minuty a fungoval. Dnes je jednodušší a rychlejší ho napsat sám, než řešit, proč nefunguje.
Je zcela evidentní, že běžní uživatelé opět dostávají drobečky, zatímco omezená skupina lidí má k dispozici celkem neuvěřitelné možnosti.
⚡️🚨 NEW - Borys Musielak, entrepreneur and investor, demonstrated on LinkedIn how he was able to create a highly realistic fake passport in just a few minutes using ChatGPT-4o.
His counterfeit passport managed to pass a KYC verification procedure, raising serious questions about the reliability of these KYC protocols.
Typically, fake AI-generated documents are easily spotted due to layout or typographical errors.
Musielak warned of the growing risk of large-scale identity theft, particularly for the creation of fake accounts on crypto platforms.
16 hours after publication, all attempts to reproduce the experiment failed, with ChatGPT now refusing to generate a fake passport, citing its security protocols.
Published at
2025-04-05 05:03:12Event JSON
{
"id": "03d77a064e89e0b192c3ceb9434beeaeaf036beae22192d28cd0cf79fa9059a9",
"pubkey": "9afdb83985da717731a5d3351c0a1d1ef72793890e70c2a13351ce288f56a0ed",
"created_at": 1743829392,
"kind": 1,
"tags": [
[
"p",
"4d7842051782e0d3feb034d150adc2b6bae4ee3b49786793bffa468b6f5b96b3"
]
],
"content": "Tohle krásně ukazuje základní problém s aktuální implementací AI. Ten problém není to, že jsou lidé schopni vygenerovat falešný pas, který projde KYC procesem. Problém je v tom, že tuhle funkci dokáže někdo vypnout. \n\nPoužívám tyhle nástroje relativně dlouho, zejména na jednoduché úkoly jako psaní jednoúčelových skriptů nebo generování sumářů pro dokumentaci. S každým dalším updatem jsou tyhle základní schopnosti horší a horší. Jednoduchý skript pro Intune, který dělá jednu konkrétní úplně tupou věc, dřív zabral dvě minuty a fungoval. Dnes je jednodušší a rychlejší ho napsat sám, než řešit, proč nefunguje. \n\nJe zcela evidentní, že běžní uživatelé opět dostávají drobečky, zatímco omezená skupina lidí má k dispozici celkem neuvěřitelné možnosti.\n\nnostr:note1gsypqsyrxshp6yv66j826vquvv8thyuem77rgplt65yly8c7r09quh8fhx",
"sig": "e69f8f4f01f6260b4a105f8bcface484e57d0a750898f9cc7009c0739b5382a97f3ca313347f7b37a5e0d33ed2500836e99365e25fa0cd06e9896775b1116b9b"
}