Intelligence artificielle : gros modèles de langages (LLM)

Discussions et revue de presse sur des thèmes ne relevant ni de la politique ni de l'économie et des finances: technologies, emploi, écologie, transport, sport...
Message
Auteur
Avatar du membre
War Again
Messages : 620
Enregistré le : 18 oct. 2022, 10:21

Re: Intelligence artificielle : gros modèles de langages (LLM)

#101 Message par War Again » 28 avr. 2023, 08:22

Jeffrey a écrit :
22 avr. 2023, 16:57
là j'ai arrêté de jouer.
Je suis incapable de répondre aux questions que tu poses à ChatGPT, mais plus je joue avec en matière de programmation, et moins je crains de devoir lui céder mon boulot un joue, il est vrai. Ca reste impressionnant, mais ça a ses limites, et assez tôt.
Il faudrait tout de même que l'âge légal de départ à la retraite ne recule pas trop d'ici à 20-25 ans, sinon je vais vraiment finir par céder mon job à une IA. :/
Ignorés : personne. Suffit de ne pas lire ceux que l'on juge indignes d'être lus. (sauf PACA, parce que je n'ai pas de soucis avec la contradiction, mais les vieux radoteurs, je ne les tolère que par obligation familiale)

Avatar du membre
titano
~~+
~~+
Messages : 8586
Enregistré le : 27 oct. 2013, 19:36
Localisation : Stilwater

Re: Intelligence artificielle : gros modèles de langages (LLM)

#102 Message par titano » 28 avr. 2023, 08:25

Le jour il sera capable de te remplacer, les problèmes seront autres que celui de conserver son boulot.
ΜΟΛΩΝ ΛΑΒΕ
Shermann a écrit :It's a jungle out there : 978-2412019689
Pooteen président !
Pimono, neron, saturne, Guynemer => /dev/null

Avatar du membre
pangloss
~~+
~~+
Messages : 18337
Enregistré le : 25 août 2005, 10:24
Localisation : 92

Re: Intelligence artificielle : gros modèles de langages (LLM)

#103 Message par pangloss » 28 avr. 2023, 15:28

War Again a écrit :
28 avr. 2023, 08:22
Jeffrey a écrit :
22 avr. 2023, 16:57
là j'ai arrêté de jouer.
Je suis incapable de répondre aux questions que tu poses à ChatGPT, mais plus je joue avec en matière de programmation, et moins je crains de devoir lui céder mon boulot un joue, il est vrai. Ca reste impressionnant, mais ça a ses limites, et assez tôt.
Il faudrait tout de même que l'âge légal de départ à la retraite ne recule pas trop d'ici à 20-25 ans, sinon je vais vraiment finir par céder mon job à une IA. :/

On peut lui demander de l'aide, car il est "cultivé" en tout :

Comment obtenir et analyser avec Python une page web complexe utilisant beaucoup de JavaScript pour s'afficher à l'écran ?
Pour obtenir et analyser une page web complexe utilisant beaucoup de JavaScript pour s'afficher à l'écran avec Python, vous pouvez utiliser une bibliothèque telle que Selenium.

Selenium est une bibliothèque Python qui permet d'automatiser les actions du navigateur web, comme cliquer sur des boutons et remplir des formulaires. Il peut également être utilisé pour extraire des données de pages web générées dynamiquement avec JavaScript.

Voici les étapes pour utiliser Selenium pour extraire des données d'une page web avec beaucoup de JavaScript :

Installer Selenium : Vous pouvez l'installer via pip en exécutant la commande pip install selenium dans votre terminal.

Télécharger un driver pour votre navigateur : Selenium a besoin d'un driver pour contrôler le navigateur. Vous pouvez télécharger les drivers les plus populaires pour Chrome, Firefox, etc. depuis le site officiel de Selenium.

Importer les modules nécessaires : Vous devez importer les modules de Selenium dans votre script Python.

Ouvrir une instance du navigateur : Vous pouvez utiliser la classe webdriver de Selenium pour ouvrir une instance du navigateur.

Charger la page web : Utilisez la méthode get de la classe webdriver pour charger la page web que vous voulez analyser.

Attendre que la page se charge complètement : Vous pouvez attendre que la page se charge complètement en utilisant des méthodes de la classe webdriver, telles que implicitly_wait ou WebDriverWait.

Interagir avec la page web : Vous pouvez interagir avec la page web en utilisant des méthodes de la classe webdriver, telles que find_element_by_* pour trouver un élément de la page, ou execute_script pour exécuter du JavaScript personnalisé.

Extraire les données : Utilisez les méthodes de la classe webdriver pour extraire les données que vous souhaitez analyser.

Fermer le navigateur : Utilisez la méthode close de la classe webdriver pour fermer l'instance du navigateur.

Il convient de noter que l'utilisation de Selenium pour extraire des données de pages web peut être limitée par les politiques du site web et les lois sur la protection de la vie privée. Par conséquent, il est important de vérifier les politiques du site web et de respecter toutes les restrictions imposées par le site.
Peux-tu me donner un exemple commenté d'utilisation de Sélénium dans ce contexte ?
Bien sûr ! Voici un exemple commenté d'utilisation de Selenium pour extraire des données d'une page web complexe qui utilise beaucoup de JavaScript pour s'afficher à l'écran :

python
Copy code
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

# Créer une instance du navigateur
driver = webdriver.Chrome('chemin/vers/le/driver/chromedriver.exe')

# Charger la page web
driver.get('https://www.example.com/')

# Attendre que la page se charge complètement
wait = WebDriverWait(driver, 10)
wait.until(EC.visibility_of_element_located((By.XPATH, '//*[@id="content"]')))

# Interagir avec la page web
button = driver.find_element(By.XPATH, '//*[@id="my-button"]')
button.click()

# Attendre que la page se charge complètement à nouveau après le clic
wait.until(EC.visibility_of_element_located((By.XPATH, '//*[@id="result"]')))

# Extraire les données
result = driver.find_element(By.XPATH, '//*[@id="result"]')
print(result.text)

# Fermer le navigateur
driver.close()
Dans cet exemple, nous avons utilisé le navigateur Chrome et le driver Chrome fourni par Selenium pour contrôler le navigateur.

Nous avons chargé la page web en utilisant la méthode get de la classe webdriver. Nous avons ensuite attendu que la page se charge complètement en utilisant la classe WebDriverWait de Selenium avec la méthode until pour attendre que l'élément #content soit visible sur la page.

Nous avons ensuite interagi avec la page en cliquant sur un bouton #my-button. Nous avons à nouveau attendu que la page se charge complètement après le clic en utilisant la méthode until avec l'élément #result.

Enfin, nous avons extrait les données de la page en utilisant la méthode text de l'élément #result, puis nous avons fermé le navigateur en utilisant la méthode close de la classe webdriver.

Cet exemple est juste un exemple générique, il conviendra d'adapter les sélecteurs en fonction de la page web à analyser.
«C'est quand un moustique se pose sur vos testicules qu'on réalise que la violence ne résout rien."
Socrate

Avatar du membre
War Again
Messages : 620
Enregistré le : 18 oct. 2022, 10:21

Re: Intelligence artificielle : gros modèles de langages (LLM)

#104 Message par War Again » 28 avr. 2023, 15:37

Une fois sur dix, en moyenne, le code proposé par chatGPT ne compile tout simplement pas. Quand le code compile, et pour les langages que je maitrise parfaitement, le code est d'une qualité plus que discutable.
Par contre, l'étendu de ses "connaissances" est impressionnante. Cela dit, ses "connaissances" sont au mieux approximatives. Si je devais comparer chatGPT à un humain, en matière de programmation, je dirais que j'ai affaire à quelqu'un qui a lu tout ce qu'il pouvait trouver sur des sujets très variés, mais qui a du mal à mettre tout ça en application.
Ignorés : personne. Suffit de ne pas lire ceux que l'on juge indignes d'être lus. (sauf PACA, parce que je n'ai pas de soucis avec la contradiction, mais les vieux radoteurs, je ne les tolère que par obligation familiale)

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#105 Message par WolfgangK » 30 avr. 2023, 17:09

L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#106 Message par WolfgangK » 30 avr. 2023, 23:34

Ce n'est que maintenant que je découvre ce groupe reddit
https://www.reddit.com/r/LocalLLaMA/com ... available/
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#107 Message par WolfgangK » 15 mai 2023, 17:26

L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#108 Message par WolfgangK » 02 août 2023, 09:15

L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#109 Message par WolfgangK » 10 août 2023, 02:28

Croisement avec la discussion sur l'enseignement supérieur et surtout la recherche :
Image
Image
Image
Image
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

castralroc
Messages : 1508
Enregistré le : 12 août 2016, 01:14

Re: Intelligence artificielle : gros modèles de langages (LLM)

#110 Message par castralroc » 10 août 2023, 10:06

idiocracy en marche ! Même chez les "pseudo scientifiques"

moinsdewatt
~~+
~~+
Messages : 14329
Enregistré le : 14 avr. 2013, 19:41

Re: Intelligence artificielle : gros modèles de langages (LLM)

#111 Message par moinsdewatt » 27 août 2023, 14:00

Image

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#112 Message par WolfgangK » 08 sept. 2023, 23:13

L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
Sifar
~~+
~~+
Messages : 10862
Enregistré le : 13 mai 2008, 19:52

Re: Intelligence artificielle : gros modèles de langages (LLM)

#113 Message par Sifar » 13 sept. 2023, 13:32

https://www.dailymail.co.uk/health/arti ... ition.html
ChatGPT aurait posé le bon diagnostic d'une maladie rare qui aurait échappé à dix-sept médecins.
Ce que dit Pimono est exact.

CharlieBo
Messages : 60
Enregistré le : 18 févr. 2023, 17:41

Re: Intelligence artificielle : gros modèles de langages (LLM)

#114 Message par CharlieBo » 21 sept. 2023, 16:54

Image
Onclusive, cette entreprise française qui licencie plus de 200 salariés pour les remplacer par une IA Par Emma Confrère

Sur 447 «personnes employées en France dans l'ensemble des entreprises d'Onclusive», 209 salariés devraient donc être licenciés et 8 postes vacants laissés sans remplacement. Si les salariés regrettent cette décision, la société de veille médiatique assure qu’elle obtiendra ainsi de meilleurs résultats pour ses clients. Après une entreprise indienne, au tour d’une société tricolore de remplacer une partie de ses salariés par une intelligence artificielle. La filiale française d’Onclusive, qui réalise de la veille médiatique pour des professionnels, compte ainsi supprimer un grand nombre de postes. Objectif présenté par le PDG, Rob Stone, dans un mail daté du 5 septembre et consulté par Libération : «Devenir plus agiles et plus compétitifs» avec «des nouvelles technologies - et nouveaux outils qui rationaliseront [les] opérations […] et amélioreront l'efficacité et la précision» de l'entreprise.

217 postes sont concernés sur les 447 «personnes employées en France dans l'ensemble des entreprises» du groupe. Dans le détail, 209 salariés devraient être licenciés, 8 postes vacants laissés sans remplacement et 23 «nouvelles fonctions seraient créées». «Nous introduisons de nouvelles technologies et de nouveaux outils qui offriront à nos clients un service plus rapide et plus fiable», a plaidé, de son côté, Matthew Piercy, le président «Reputational Intelligence France» d'Onclusive, vendredi dernier. Parmi ces clients figurent notamment «plusieurs entreprises du CAC 40, mais aussi l'État français», mentionne Libération.

En deux ans, l’entreprise, autrefois gérée par Kantar et vendue à l’investisseur Symphony Technology Group (STG) a réussi à se faire une place de choix dans la veille médiatique. «L’intelligence artificielle n’est qu’une partie de la modernisation significative que nous entreprenons sur de nouveaux systèmes et infrastructures obsolètes que nous avons hérités de nos entreprises fondatrices», précise Onclusive au Figaro.

Pour les salariés et les syndicats, c’est la douche froide. «C’est une mauvaise idée sociale, mais c’est aussi une mauvaise idée économique. Sur certaines tâches, la machine ne peut pas remplacer l’humain. Elle n’a pas sa pertinence, sa subtilité. L’être humain, lui, est capable de filtrer et d’affiner le flux d’information. Et puis, il a la connaissance et la relation avec le client, chose que n’aura jamais l’IA», confie un délégué FO à Libération.

De son côté, l’entreprise se défend et assure «que la mise en œuvre de ce projet n’a pas été décidée à la légère». Onclusive va ainsi organiser «dix réunions préparatoires avec les élus», «des experts assisteront le Comité social et économique» et «une entreprise spécialisée» va travailler pour «le reclassement» des salariés concernés. Pour l’heure, l’info-consultation, qui a débuté le 15 septembre, va durer trois mois. Les premiers départs s’effectueront ensuite en janvier et s’étaleront jusqu’en juin 2024.
https://www.lefigaro.fr/secteur/high-te ... a-20230919

CharlieBo
Messages : 60
Enregistré le : 18 févr. 2023, 17:41

Re: Intelligence artificielle : gros modèles de langages (LLM)

#115 Message par CharlieBo » 21 sept. 2023, 16:57

Je ne sais pas combien de temps cela a pris, mais le résultat est impressionnant et ça ne fait que commencer :

Avatar du membre
crispus
~~+
~~+
Messages : 11901
Enregistré le : 11 août 2007, 12:44

Re: Intelligence artificielle : gros modèles de langages (LLM)

#116 Message par crispus » 23 sept. 2023, 20:08

Il ne reste plus à l'IA qu'à utiliser le timbre de voix de la personne, et caler au mieux les syllabes sur les mouvements de lèvres comme un doubleur pro. Ça ne devrait pas tarder... :roll:

castralroc
Messages : 1508
Enregistré le : 12 août 2016, 01:14

Re: Intelligence artificielle : gros modèles de langages (LLM)

#117 Message par castralroc » 26 sept. 2023, 09:15

Euh c’est déjà le cas dans cette vidéo.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#118 Message par WolfgangK » 17 oct. 2023, 07:28

The Geometry of Truth: Emergent Linear Structure in Large Language Model Representations of True/False Datasets
https://arxiv.org/abs/2310.06824
Large Language Models (LLMs) have impressive capabilities, but are also prone to outputting falsehoods. Recent work has developed techniques for inferring whether a LLM is telling the truth by training probes on the LLM's internal activations. However, this line of work is controversial, with some authors pointing out failures of these probes to generalize in basic ways, among other conceptual issues. In this work, we curate high-quality datasets of true/false statements and use them to study in detail the structure of LLM representations of truth, drawing on three lines of evidence: 1. Visualizations of LLM true/false statement representations, which reveal clear linear structure. 2. Transfer experiments in which probes trained on one dataset generalize to different datasets. 3. Causal evidence obtained by surgically intervening in a LLM's forward pass, causing it to treat false statements as true and vice versa. Overall, we present evidence that language models linearly represent the truth or falsehood of factual statements. We also introduce a novel technique, mass-mean probing, which generalizes better and is more causally implicated in model outputs than other probing techniques.
https://github.com/saprmarks/geometry-of-truth

https://saprmarks.github.io/geometry-of ... taexplorer
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
crispus
~~+
~~+
Messages : 11901
Enregistré le : 11 août 2007, 12:44

Re: Intelligence artificielle : gros modèles de langages (LLM)

#119 Message par crispus » 18 oct. 2023, 18:27

castralroc a écrit :
26 sept. 2023, 09:15
Euh c’est déjà le cas dans cette vidéo.
Je n'arrivais pas à la lire sur mon téléphone. Après visionnage le lipdub est pas mal, mais ce n'est pas (encore) la voix de l'intéressée. :roll:

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#120 Message par WolfgangK » 06 nov. 2023, 01:04

https://arxiv.org/abs/2311.00871

Pretraining Data Mixtures Enable Narrow Model Selection Capabilities in Transformer Models
Our empirical results show transformers demonstrate near-optimal unsupervised model selection capabilities, in their ability to first in-context identify different task families and in-context learn within them when the task families are well-represented in their pretraining data. However when presented with tasks or functions which are out-of-domain of their pretraining data, we demonstrate various failure modes of transformers and degradation of their generalization for even simple extrapolation tasks. Together our results highlight that the impressive ICL abilities of high-capacity sequence models may be more closely tied to the coverage of their pretraining data mixtures than inductive biases that create fundamental generalization capabilities.
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
neron
~~+
~~+
Messages : 13747
Enregistré le : 21 déc. 2005, 19:21
Localisation : Haut de Seine

Re: Intelligence artificielle : gros modèles de langages (LLM)

#121 Message par neron » 21 nov. 2023, 18:36

Le leader d'open-Ai, Sam Altman, juif, a été.mis à la porte par un coup.d'etat..Son équipe et lui sont bien venu chez MS. Sans eux openAI est amha mort.

Les grillons pelerins s'imaginent gagner en pillant et leur soutien (collectivisye, wokiste, ingeniste, ecolo...) me font rire à croyant bénéficier du travail des autres.

Gog / Magog , lumiere / obscurentisme, Israël/ arabe, travail /.paresse, raison / irrationnelite,..... Tout se paye ainsi va lemonde fort heureusement depuis 5000 ans 8) 8)
La carte n'est pas le territoire - Le monde du Ā (1945) 1er axiome de sémantique générale.

Avatar du membre
neron
~~+
~~+
Messages : 13747
Enregistré le : 21 déc. 2005, 19:21
Localisation : Haut de Seine

Re: Intelligence artificielle : gros modèles de langages (LLM)

#122 Message par neron » 23 nov. 2023, 03:22

Au sujet, avez-vous des nouvelles du plan de l'UE pour faire une IA à coup de mds. (une IA). Je pari pour un gros flop (*)


--
(*) il nous faudrait j'imagine (1) une base de données donc un moteur web.. (ha mince l'UE apres 30 ans et 20 mds rien) (2) gérer des langues à la grammaire complexe. Suivez mon regard alors qu'ici des râleurs +/- reac vous charient de droit dès la moindre faute :oops: .(3) sortir du modèle collectiviste étatique d'opportunité (4) remettre les compétences en avant €€ (5). anéantir les crabes, grillons , leur culture, logique et financement chose impossible car justement c'est eux qui sont a tête de l'UE. Par exemple comme en Argentine faire sauter notre collectivisme etatique semi public/prive mais c'est quasi impossible et des générations.sacrifiées..
La carte n'est pas le territoire - Le monde du Ā (1945) 1er axiome de sémantique générale.

moinsdewatt
~~+
~~+
Messages : 14329
Enregistré le : 14 avr. 2013, 19:41

Re: Intelligence artificielle : gros modèles de langages (LLM)

#123 Message par moinsdewatt » 26 nov. 2023, 22:49

L’intelligence artificielle n’existe pas, par Luc Julia conférence 56 mn https://www.youtube.com/watch?v=yuDBSbng_8o

France Université Numérique

----------------------------------------------------

C'est exprimé en terme simples, pas de jargon de ce métier.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#124 Message par WolfgangK » 27 nov. 2023, 15:57

Croisement avec la discussion sur le racisme :
Image
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
neron
~~+
~~+
Messages : 13747
Enregistré le : 21 déc. 2005, 19:21
Localisation : Haut de Seine

Re: Intelligence artificielle : gros modèles de langages (LLM)

#125 Message par neron » 01 déc. 2023, 04:27

A 45 mn.,.l'IA et 1h25 le neurolink. En cliquant sur outil en bas a droite, vous pouvez avoir le sous-titrages en français



Perso.,.il a éluder les questions interrogeant son empathie, Il.n'a fait preuve d'aucune altérité. Son humanité est surtout objective (rationelle,. quantitative,.carthesienne, sartrienne en fait) et non intuitive.
La carte n'est pas le territoire - Le monde du Ā (1945) 1er axiome de sémantique générale.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#126 Message par WolfgangK » 04 déc. 2023, 11:10

L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
neron
~~+
~~+
Messages : 13747
Enregistré le : 21 déc. 2005, 19:21
Localisation : Haut de Seine

Re: Intelligence artificielle : gros modèles de langages (LLM)

#127 Message par neron » 07 déc. 2023, 01:17

neron a écrit :
01 déc. 2023, 04:27
Il.n'a fait preuve d'aucune altérité. ... Son humanité est surtout objective et non intuitive.
Videos des présidents de 3 des 8 universités de l'ivy league : harvard, Pen, MIT auquel faut rajouter Columbia, interrogés officiellement, statuent "ne pas voir de soucis quand on menace des juifs d'un nouveau génocide." Tout dépend de la situation"

Pourquoi ici et non sur la file justice, progressisme, islamisme, racisme, éducation ? car l'objet de la video de Musk qui est asperger, du conflit entre directeurs d'OpenIA, de ces 3 vidéos, du questionnement sur l'IA, c'est que l'"intelligence pure" mène à l'inomnable (la monstruosite de l'Europe Centrale de 1930 à son firmament intellectuel).
-------
Nb: Écoutez comment ses président se défendent. C'est un classique des interviews a charge, des enquêtes public, mais aussi judiciaire : Si vous êtes accusé, il ne faut jamais affirmer / infirmer de chose, ni repondre directement. C'est un art de maintenir un échange irrationnel. Si vous ne le pouvez, taisez-vous.
La carte n'est pas le territoire - Le monde du Ā (1945) 1er axiome de sémantique générale.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#128 Message par WolfgangK » 29 déc. 2023, 18:20

Je ne suis pas fan d'OpenAI, mais on a des trucs assez sympa en local même sans carte graphique :

Code : Tout sélectionner

curl https://ollama.ai/install.sh | sh

Code : Tout sélectionner

ollama run openchat:7b-v3.5-1210-q4_K_S 
Voire

Code : Tout sélectionner

ollama run nollama/una-cybertron-7b-v2
Avec pas mal de RAM :

Code : Tout sélectionner

ollama run mixtral:8x7b-instruct-v0.1-q4_0
Un LLM même sans RAG pourrait passer mes examens :roll: .

Quelqu'un a des outils de RAG (basés sur llama-index ?) à conseiller ?
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
pimono
~~+
~~+
Messages : 24657
Enregistré le : 03 juin 2011, 22:45

Re: Intelligence artificielle : gros modèles de langages (LLM)

#129 Message par pimono » 01 janv. 2024, 15:38

J'ai utilisé dernièrement de l'intelligence artificielle, faites attention pour des choses sérieuses, ça peut couter cher, c'est pas fiable du tout.
J'ai demandé à faire des calculs basique pour ma conso VE, l'AI est infoutu de calculer correctement, je trouve ça grave la façon dont ça s'est planté alors que tous les paramètres étaient simples et logique et je savais au résultat qu'il y avait un soucis, je lui ai dis qu'il s'était trompé, et le message d'après, il s'est excusé et a repris le bon calcul. Mais le mal était fait, cela n'est pas normal.

Conclusion, NE VOUS FIEZ PAS AUX IA, C''est pas fiable du tout , un jour, vous serez plantés sévèrement et vous regretterez d'avoir fait confiance.
"Ils feront le travail pour nous et nous prospérerons grâce à leurs dettes et leur dur labeur, ...nous continuerons à les faire vivre dans la peur et la colère par l’image et le son."

Avatar du membre
Fluctuat
+
+
Messages : 3077
Enregistré le : 27 avr. 2011, 11:45
Localisation : Ici, là, ou ailleurs

Re: Intelligence artificielle : gros modèles de langages (LLM)

#130 Message par Fluctuat » 01 janv. 2024, 19:43

Vous demandez à un programme qui calcule la probabilité statistique qu'un mot suive un autre de faire des calculs : ce n'est pas fait pour...

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#131 Message par WolfgangK » 01 janv. 2024, 20:40

Oui. Il faut avoir conscience que l IA n est encore qu à ses balbutiements : seulement au niveau d un " sciences" Po.
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#132 Message par WolfgangK » 03 févr. 2024, 00:28

https://davidrozado.substack.com/p/the- ... es-of-llms

Les gros modèles de langage utilisés pour la conversation sont plutôt de gauche, et il semble que ce soit le résultat de l’entraînement spécifique pour la conversation plutôt qu'émergeant de l’entraînement sur le langage :
Image

Image
Et on peut facilement changer leur orientation politique :
Image

On peut essayer différentes versions : https://depolarizinggpt.org/
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#133 Message par WolfgangK » 25 févr. 2024, 00:09

Croisement avec les discussions sur le racisme :
Image

Image
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
pierga
Messages : 1220
Enregistré le : 09 août 2020, 08:41

Re: Intelligence artificielle : gros modèles de langages (LLM)

#134 Message par pierga » 25 févr. 2024, 09:59

Artificielle ou naturelle, l'intelligence... peu importe..................on peut etre kon et heureux ! c'est l'essentiel :D

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#135 Message par WolfgangK » 28 févr. 2024, 17:10

croisement avec les discussions sur les codeurs mis au chômage :

https://huggingface.co/blog/starcoder2

https://huggingface.co/bigcode/starcoder2-15b
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
pangloss
~~+
~~+
Messages : 18337
Enregistré le : 25 août 2005, 10:24
Localisation : 92

Re: Intelligence artificielle : gros modèles de langages (LLM)

#136 Message par pangloss » 28 févr. 2024, 17:43

Sora: text to video de Open AI
«C'est quand un moustique se pose sur vos testicules qu'on réalise que la violence ne résout rien."
Socrate

moinsdewatt
~~+
~~+
Messages : 14329
Enregistré le : 14 avr. 2013, 19:41

Re: Intelligence artificielle : gros modèles de langages (LLM)

#137 Message par moinsdewatt » 28 févr. 2024, 19:15

Merci pour la vidéo. C'est absolument fascinant ce que ça peut faire.
Il y a des petits studios qui vont devoir s'approprier ça si ils veulent pas couler, et il va y avoir de la casse dans ces métiers.

nanne02
-++
-++
Messages : 4663
Enregistré le : 27 oct. 2010, 15:39

Re: Intelligence artificielle : gros modèles de langages (LLM)

#138 Message par nanne02 » 28 févr. 2024, 20:24

Et chez les acteurs de p*rno ça va être l hécatombe...

Est ce qu on sera débarrassé des influenceurs humains ?

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#139 Message par WolfgangK » 08 mars 2024, 22:15

Ben92 a écrit :
28 déc. 2022, 01:11
La limite de ces robots, aussi sophistiqués soient ils, est que ça reste programmé avec un script (c'est-à-dire des structures if-then-else pour les connaisseurs). Alors certes c'est un script avec beaucoup plus d'embrachements, mais ça reste un script comme le bot conversationnel de 1997 ou le trombone d'excel 2000.
Les réseaux de neurones ça reste de la recherche théorique, on est encore très loin de pouvoir les faire fonctionner efficacement dans des applications pratiques comme l'imitation d'une conversation. Je me demande si on n'y arrivera jamais ailleurs, il y a eu beaucoup de fantasmes sur les réseaux de neurones mais en réalité ça reste un truc de "savant fou" comme les inventions du professeur Tournesol.
Désolé pour la technicité de mon propos, j'ai essayé de vulgariser mais ce n'est pas évident.
En 2022 , :mrgreen:
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
al0
-++
-++
Messages : 3988
Enregistré le : 31 mars 2009, 22:36
Localisation : 44

Re: Intelligence artificielle : gros modèles de langages (LLM)

#140 Message par al0 » 08 mars 2024, 22:28

Allemagne : Daniela Klette, ex-membre de la RAF recherchée depuis 30 ans, retrouvée grâce à l’IA

https://www.huffingtonpost.fr/internati ... 30910.html
Le journaliste du site Bellingcat Michael Colborne a utilisé un logiciel de reconnaissance faciale pour retrouver la fugitive recherchée par Interpol.

castralroc
Messages : 1508
Enregistré le : 12 août 2016, 01:14

Re: Intelligence artificielle : gros modèles de langages (LLM)

#141 Message par castralroc » 08 mars 2024, 23:53

J’ai beaucoup de mal avec chatgpt4 dernièrement.
Au début il y a un an je trouvais ses réponses vachement fouillées et précises, maintenant je le trouve très mou.. il ne va plus au bout des choses.

Alors j’ai lu des articles à ce sujet mais je pensais que c’était résolu.

Comme quoi ça aussi c’est un autre danger de l’IA, tu es à la merci qu’elle se mette à bugger, à réfléchir moins bien… si tu bases tout ton business la dessus c’est chaud quand même.


J’ai de plus en plus l’impression que cette mode de lIA va rendre l’occident encore plus conne, niveau intellectuel et bcp moins créative au niveau artistique.
Sora c’est très impressionnant mais j’ose croire que ça ne remplacera pas le génie d’un Spielberg…

Avatar du membre
pangloss
~~+
~~+
Messages : 18337
Enregistré le : 25 août 2005, 10:24
Localisation : 92

Re: Intelligence artificielle : gros modèles de langages (LLM)

#142 Message par pangloss » 10 mars 2024, 20:13

LLM and the end of programming

Il n'y en a plus pour longtemps.
«C'est quand un moustique se pose sur vos testicules qu'on réalise que la violence ne résout rien."
Socrate

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#143 Message par WolfgangK » 15 mars 2024, 23:41

Croisement avec la discussion demandant des nouvelles de la science :
Image

Image
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

castralroc
Messages : 1508
Enregistré le : 12 août 2016, 01:14

Re: Intelligence artificielle : gros modèles de langages (LLM)

#144 Message par castralroc » 16 mars 2024, 19:31

Ça fait peur..
Mais en gros ça veut dire qu’ils ne relisent meme pas une fois après avoir fait le copier coller.. c’est une dinguerie quand meme.

Je trouve ça limite trop gros pour être vrai. Car après un copier coller il y a toujours un peu de mise en page, sauts de ligne à corriger, etc…


conclusion ——-> c’est du fake ou de la manipulation pour jeter du discrédit sur l’IA ou sur les études scientifiques

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#145 Message par WolfgangK » 16 mars 2024, 23:01

castralroc a écrit :
16 mars 2024, 19:31
Ça fait peur..
Mais en gros ça veut dire qu’ils ne relisent meme pas une fois après avoir fait le copier coller.. c’est une dinguerie quand meme.

Je trouve ça limite trop gros pour être vrai. Car après un copier coller il y a toujours un peu de mise en page, sauts de ligne à corriger, etc…


conclusion ——-> c’est du fake ou de la manipulation pour jeter du discrédit sur l’IA ou sur les études scientifiques
Pour la première citation, commentaire d'un auteur : https://pubpeer.com/publications/F93A8D ... 8B132161A7


Pour la deuxième : https://www.sciencedirect.com/science/a ... 3024002402
Introduction

Certainly, here is a possible introduction for your topic:Lithium-metal batteries are promising candidates for high-energy-density rechargeable batteries due to their low electrode potentials and high theoretical capacities [1], [2].
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#146 Message par WolfgangK » 17 mars 2024, 21:24

En fait, les revues d'articles sont maintenant aussi générées par LLM, donc...

https://arxiv.org/abs/2403.07183

Monitoring AI-Modified Content at Scale: A Case Study on the Impact of ChatGPT on AI Conference Peer Reviews
We apply this approach to a case study of scientific peer review in AI conferences that took place after the release of ChatGPT: ICLR 2024, NeurIPS 2023, CoRL 2023 and EMNLP 2023. Our results suggest that between 6.5% and 16.9% of text submitted as peer reviews to these conferences could have been substantially modified by LLMs, i.e. beyond spell-checking or minor writing updates.
Image
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
pangloss
~~+
~~+
Messages : 18337
Enregistré le : 25 août 2005, 10:24
Localisation : 92

Re: Intelligence artificielle : gros modèles de langages (LLM)

#147 Message par pangloss » 18 mars 2024, 13:01

Une intéressante interview de John Gray dont j'ai demandé à ChatGPT un résumé en moins de 400 mots.

Le résumé:
John Gray, dans son interview, offre une analyse critique des dynamiques politiques et sociales contemporaines, en se concentrant particulièrement sur le libéralisme, le populisme, la mondialisation et l'avenir des sociétés occidentales. Il critique la confiance excessive en la mondialisation et la démocratie libérale, prédisant bon nombre des problèmes auxquels nous sommes confrontés aujourd'hui, tels que la fragmentation politique et la résurgence du nationalisme. Gray soutient que les problèmes d'aujourd'hui, incluant le mécontentement culturel, social et économique, sont les conséquences directes des politiques promues par les élites libérales, menant à l'émergence du populisme comme réaction. Il souligne que ces élites échouent à reconnaître leur rôle dans la création de ces conditions de réaction, l'attribuant à la place à des forces externes ou malveillantes.

Gray réfléchit également sur le concept de progrès et l'inévitabilité de l'histoire, remettant en question l'idée que l'histoire a une direction prédéterminée vers le libéralisme. Il suggère que les structures sociétales futures pourraient s'inspirer du passé, avec des possibilités de retour à des formes de religion, d'ultranationalisme ou même de féodalisme. Cette perspective critique la vue linéaire du progrès historique et met en évidence la nature cyclique des changements sociétaux.

En outre, Gray se penche sur les implications des idéologies hyper-libérales et des mouvements dits "woke", notant leur nature paradoxale. Ces idéologies, tout en critiquant la civilisation occidentale, s'appuient sur et poussent à l'extrême les mêmes idéaux qui en sont issus. Selon Gray, cela résulte en une forme d'impérialisme culturel qui est résisté par une grande partie du monde en dehors de la bulle libérale occidentale.

Dans l'ensemble, l'interview de John Gray offre une vision pessimiste de la trajectoire actuelle des sociétés occidentales, remettant en question la durabilité de la démocratie libérale et de la mondialisation tout en mettant en garde contre l'adoption inconditionnelle des narratifs de progrès. Il appelle à une réévaluation de ces trajectoires à la lumière des cycles historiques et des conséquences non intentionnelles des politiques libérales.
«C'est quand un moustique se pose sur vos testicules qu'on réalise que la violence ne résout rien."
Socrate

Avatar du membre
pangloss
~~+
~~+
Messages : 18337
Enregistré le : 25 août 2005, 10:24
Localisation : 92

Re: Intelligence artificielle : gros modèles de langages (LLM)

#148 Message par pangloss » 19 mars 2024, 15:12

Excellente vidéo.
Cette vidéo fournit une vue d'ensemble complète et des conseils pratiques pour maîtriser ChatGPT en 2024, couvrant les mises à jour récentes, les astuces de rédaction de prompts, et l'introduction de fonctionnalités avancées comme les instructions personnalisées, Vision, et les GPTs personnalisés. Voici un résumé point par point, suivi d'un résumé global :

### Mises à jour et nouvelles fonctionnalités
- ChatGPT a reçu d'importantes mises à jour, dont les instructions personnalisées et la capacité d'appeler des GPTs personnalisés dans tout chat, considérée comme révolutionnaire.
- Vision s'est avéré extrêmement utile, tandis que les plugins ont été jugés surévalués et sont devenus moins pertinents.
- Les GPTs personnalisés sont la mise à jour la plus significative, permettant aux utilisateurs de construire et d'utiliser leurs propres versions spécialisées de ChatGPT.

### Conseils pour la rédaction de prompts
- La rédaction efficace de prompts améliore la qualité des réponses. Les conseils incluent la spécification, la stylisation, le formatage, et l'imposition de restrictions pour des réponses plus précises et utiles.
- Utiliser la technique de "Chain of Thought" pour les prompts complexes améliore l'exactitude et les capacités de raisonnement de ChatGPT.
- Des astuces supplémentaires incluent la simplification des réponses, l'utilisation d'analogies pour une meilleure compréhension et rétention, et l'exploration des arguments opposés pour une vision plus équilibrée des sujets.

### Vision
- Permet aux utilisateurs de tirer parti de la reconnaissance d'images pour obtenir des conseils, effectuer des analyses, et améliorer l'esthétique visuelle dans divers contextes pratiques.

### Custom GPTs et instructions personnalisées
- Les instructions personnalisées permettent d'ajuster le comportement de ChatGPT pour qu'il réponde de manière plus pertinente et personnelle.
- Les GPTs personnalisés permettent aux utilisateurs de créer des versions de ChatGPT adaptées à des besoins spécifiques, améliorant ainsi l'efficacité et la personnalisation des interactions.

### Utilisation avancée
- L'intégration de fonctionnalités avancées comme Vision, les GPTs personnalisés, et la navigation web ouvre de nouvelles possibilités d'utilisation dans des domaines spécifiques et des scénarios d'utilisation complexes.
- La création de GPTs personnalisés pour des tâches spécifiques, comme la génération de pages de livres de coloriage ou l'analyse de données, illustre le potentiel de personnalisation et d'efficacité accrue.

### Résumé global
La vidéo offre un guide exhaustif pour exploiter pleinement le potentiel de ChatGPT en 2024, mettant en lumière les améliorations significatives, les meilleures pratiques de prompt, et les fonctionnalités avancées comme les GPTs personnalisés et Vision. Ces conseils et astuces permettent aux utilisateurs de maximiser la valeur de ChatGPT dans une variété de contextes, améliorant la productivité, la créativité, et la compréhension des sujets complexes.
Le futur est en marche...
«C'est quand un moustique se pose sur vos testicules qu'on réalise que la violence ne résout rien."
Socrate

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#149 Message par WolfgangK » 15 avr. 2024, 03:03

Modifié en dernier par WolfgangK le 15 avr. 2024, 03:09, modifié 1 fois.
L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Avatar du membre
WolfgangK
~~+
~~+
Messages : 16350
Enregistré le : 20 juin 2011, 00:02

Re: Intelligence artificielle : gros modèles de langages (LLM)

#150 Message par WolfgangK » 15 avr. 2024, 03:06



L'islamophobie n'est pas plus du racisme que l'antisionisme n'est de l'antisémitisme.
Que les racistes soient islamophobes n'implique pas que les islamophobes soient racistes.

Répondre