BarcelonaEls últims dies, fins i tot els principals representants de la intel·ligència artificial (IA), d'Open AI a Anthropic, Space X o Google, han alertat sobre els riscos d'una tecnologia que, adverteixen, pot acabar dominant els humans. "Hi ha una genuïna preocupació pels models que es fan comuns i no s’han pogut provar gaire i es poden fer barbaritats", afirma Esteve Almirall, professor d'Esade especialista en dades, analytics, tecnologia i IA. En aquest context, un cop Open AI, la creadora del ChatGPT, ha decidit retardar la seva sortida a borsa per fer una mena de pausa en el creixement, hi ha qui veu el temor a un càstig estratosfèric al mercat si alguna de les eines existents es veu immersa en alguna malifeta. Algunes d'aquestes companyies tenen valoracions que superen el producte interior brut (PIB) de països com Alemanya (més de cinc bilions) i una reacció negativa significaria una desfeta gairebé sense precedents donat que no hi ha hagut mai empreses amb aquests preus, adverteix Josep Soler, fundador i conseller executiu d'EFPA Espanya (Associació Espanyola d'Assessors i Planificadors Financers). "Les enormes valoracions que s'han fet d'aquestes companyies es desplomarien en cas que se'ls perdés la confiança", afegeix.
Llegeix-lo tot
El vessant dels riscos
L'enginyer britànic d'Anthropic Jacob Coxon, que també havia treballat per a OpenAI, es va fer popular fa uns dies al presentar la seva dimissió mentre alertava que les dues companyies "no estan actuant amb responsabilitat" i estan "jugant amb les nostres vides". En un fil al seu compte d'X va advertir que les persones que estan darrere del desenvolupament exponencial de la IA "creuen que ens podrà matar a tots al final d'aquesta dècada". No van trigar a sumar-se a les alertes els principals representants de les companyies, entre ells, el conseller delegat d'Anthropic. Dario Amodei va demanar en una carta pública que es redueixi el ritme al qual s'estan millorant les capacitats dels models d'IA. Segons va dir, actualment la tecnologia s'està movent cap a una dinàmica d'autoperfeccionament recursiu" que amenaça amb causar catàstrofes de ciberseguretat a escala mundial.
Tot i que actualment la IA necessita que l'ésser humà la dirigeixi amb bons propòsits o dolents, no es descarta que en un futur pugui prendre decisions i actuar autònomament. O que se'n faci un ús pervers. Anthropic, per exemple, va descobrir que els houthis del Iemen van fer servir la seva eina Claude –pagant amb targeta de crèdit, com qualsevol usuari– per dirigir els seus míssils contra drons. I hi ha eines barates i molt potents que es poden incloure en un mac de 1.000 euros com Qwen, del gegant xinès Alibaba, amb les quals es pot entrar en sistemes sanitaris o financers amb escletxes o forats d'entrada o fer-ne altres usos perversos, avisa Almirall. Existeix preocupació per aquests models oberts, molt potents, que qualsevol narco, terrorista o extorsionador es pot muntar a l'ordinador i es fa difícil trobar-los o aturar-los, afegeix.
El vessant geopolític
Els representants de l'oligopoli de la IA als EUA reclamen regular-la. És una cosa per la qual també aposta l'ala més esquerrana del Partit Demòcrata, amb Bernie Sanders al capdavant. I també es defensa la creació d'una mena d'organisme internacional per supervisar-ne l'activitat i donar una mena de segell de qualitat. Al juliol, 29 països van signar a Shanghai un acord per crear la World Artificial Intelligence Cooperation Organization, una organització intergovernamental destinada a impulsar la cooperació internacional i la governança de la IA. El president dels Estats Units, Donald Trump, s'hi oposa i prioritza barrar el pas a la Xina en la carrera de la IA i, per tant, que les grans tecnològiques dels EUA continuïn amb la seva carrera sense tenir en compte altres qüestions, com amb la cursa per dominar l'espai. A Pequín, en canvi, li interessa una iniciativa d'aquesta mena, que li permetria operar fins i tot als EUA, afirma Almirall. El ministre xinès de Seguretat de l’Estat, Chen Yixin, ha reclamat la creació d’una "barrera de seguretat" per a la IA i l'ha situada com un dels principals camps de la competició tecnològica global. Alhora ha advertit dels riscos que comporta el seu desenvolupament accelerat.
La potència asiàtica, que està forjant una ruta de la seda tecnològica que passa per Àfrica i Sud-america, veu en la IA una altra oportunitat de consolidar-se com a potència, com va passar amb el 5G i el rol de Huawei. Als líders d'OpenAI o Anthropic, per la seva banda, el que els agradaria és que hi hagués barreres d'entrada al negoci, no només per als xinesos, sinó per a altres companyies i iniciatives dels mateixos EUA per mantenir el seu domini del mercat, afirmen els experts. Es tractaria de limitar la competitivitat dels nous entrants i de convertir en un oligopoli el negoci de la IA.
El vessant dels diners
La carrera de la IA és intensiva en consum de recursos financers. Almirall afirma que "aquesta hipercompetició minva molt els beneficis empresarials, i cal pagar-la. De fet, s'han de fer models cada sis mesos que ningú pot amortitzar". A més de la via de la borsa, que Open AI ja ha retardat a l'any que ve, les grans tecnològiques, conscients que calen recursos gegantins, estan encapçalant la captació de fons als mercats, amb més de 600.000 milions de dòlars, a través d'emissions de deute perquè no es volen quedar sense diners a la caixa. Aquest, de fet, no ha estat l'únic factor, però sí un dels que han contribuït a elevar la rendibilitat que els inversors exigeixen en els darrers temps als bons dels estats, que han de pagar més per captar finançament i fer perdre atractiu a les emissions de les grans tecnològiques. "Aquestes companyies, amb valoracions sense precedents basades en expectatives gairebé il·limitades, són les que estan dominant els mercats de capitals", avisa Soler. Aquests valors són els que, en cas de notícies negatives o que n'afectin la reputació, poden provocar un terratrèmol borsari.
Facts Only
* AI representatives from OpenAI, Anthropic, Space X, and Google have alerted about risks of the technology dominating humans.
* Esteve Almirall, professor at Esade, stated there is a genuine concern over common models that have not been fully proven and could be used for harm.
* OpenAI decided to delay its stock market exit to pause growth.
* There is fear of catastrophic market consequences if existing AI entities are implicated in wrongdoing.
* Some companies have valuations exceeding the GDP of countries like Germany (over five trillion dollars).
* Jacob Coxon, an engineer from Anthropic/OpenAI, resigned while warning that the companies "are not acting responsibly" and "are playing with our lives."
* Dario Amodei requested a reduction in the pace of AI model improvement, noting the technology is moving toward recursive self-improvement.
* Anthropic discovered that Houthis used Claude to direct missiles against drones.
* Open-source, powerful models like Qwen, developed by Alibaba, could be used for illicit purposes, such as accessing sensitive systems in healthcare or finance.
* Representatives of the AI oligopoly in the US are calling for regulation and international oversight.
* Twenty-nine countries signed an agreement to create the World Artificial Intelligence Cooperation Organization.
* The US President Donald Trump opposed the cooperation initiative and prioritized blocking China's advancement in AI.
* China's Minister of State Security called for a "security barrier" for AI development, positioning it as a global technological competition.
* The AI race is intense, requiring massive financial resources, with large tech companies raising over $600 million through debt emissions.
Executive Summary
Full Take
The narrative presents a tension between the accelerating, potentially uncontrollable capabilities of advanced AI and the human desire for control, accountability, and equitable governance. The pattern observed is a convergence of existential risk framing—positing autonomous systems capable of catastrophe—with immediate socio-economic anxieties regarding market stability and geopolitical dominance. The juxtaposition of theoretical risk (self-improving systems) with tangible misuse (missile guidance, vulnerable open models) forces an examination of where regulatory and ethical frameworks are failing to keep pace with technological velocity.
The focus on the financial aspect reveals a systemic conflict: the pursuit of unprecedented technological power is being financed through hyper-leveraged speculative markets, creating a feedback loop where valuation demands escalate risk exposure. The geopolitical dimension underscores that control over AI is reframed not merely as a technological competition but as a zero-sum struggle for global hegemony between powers like the US and China. Furthermore, the push for international cooperation, while presented as a governance solution, is immediately complicated by competing national interests regarding technological supremacy. This structure suggests that addressing the risks requires moving beyond siloed development concerns to establish enforceable, internationally recognized guardrails that acknowledge both potential futures and current vulnerabilities.
What questions remain: If the goal is autonomous self-improvement, what specific, verifiable mechanisms can be established today to enforce a human-aligned objective function across disparate, potentially adversarial models? How can financial incentives be decoupled from unchecked growth when the perceived rewards are so immense? And if global governance structures are being built based on competing national priorities, how can genuine international consensus be forged regarding existential AI risk versus strategic advantage?
Sentinel — Human
The text exhibits strong human characteristics, characterized by the weaving of specific expert commentary around complex themes of AI risk, geopolitics, and finance, suggesting a genuine journalistic or analytical synthesis.
