L’expansion a pris de l’importance à la suite des récentes percées technologiques. De grands réseaux de neurones ont été formés dans des environnements 3D à l’aide d’un apprentissage par renforcement profond sur des milliards d’étapes d’expérience, aidant à faire progresser le développement d’entités intelligentes incarnées capables d’accomplir des tâches axées sur des objectifs. Pour garantir que les réseaux fonctionnent à une échelle aussi massive sans tracas, les systèmes RL doivent évoluer pour inclure de nombreux ordinateurs et faire bon usage des ressources disponibles, telles que les GPU, tout en maintenant un modèle d’apprentissage efficace. L’un des moyens les plus prometteurs d’atteindre cette métrique consiste à la regrouper en fonction de la politique. Ces méthodes rassemblent l’expérience de nombreux environnements différents utilisant la politique et la mettent à jour avec l’expérience cumulée.
En général, l’apprentissage par renforcement lié à la politique RL est largement divisé en deux catégories, synchrone (SyncOnRL) et asynchrone (AsyncOnRL). Tout d’abord, la stratégie est appliquée à l’ensemble du lot afin que les étapes T soient collectées à partir de tous les environnements N. Ce sont les deux premiers points de synchronisation dans SyncOnRL. La politique mise à jour est basée sur cet ensemble d’expériences (T, N). Cependant, le débit est réduit par la synchronisation car le système doit attendre longtemps que l’environnement le plus lent se termine. L’effet extrême est un terme fréquemment utilisé pour décrire cet événement. En éliminant ces sites de synchronisation, AsyncOnRL réduit le stress et améliore la productivité. Dans un article récemment publié par Meta AI et des chercheurs du Georgia Institute of Technology, l’équipe propose de déployer l’expérience variable (VER). Cette méthode combine les avantages de SyncOnRL et AsyncOnRL tout en estompant les différences entre eux. Semblable à AsyncOnRL, VER n’utilise pas de points de synchronisation ; Au lieu de cela, il calcule les prochaines étapes d’action et les environnements, et met à jour la politique dès que possible. VER met à jour la politique après avoir acquis de l’expérience avec la politique actuelle, tout comme le fait SyncOnRL.
Deux idées importantes ont servi de base à VER. La première est qu’AsyncOnRL réduit l’effet du stress en collectant une quantité différente d’expérience de chaque environnement (plus que les environnements simulés rapides et moins que les environnements lents). Le deuxième résultat est que la longueur de la soustraction est constante pour SyncOnRL et AsyncOnRL. Bien que la longueur spécifique de la soustraction puisse faciliter la mise en œuvre, selon les chercheurs, elle n’est pas nécessaire pour RL. Ces deux résultats critiques ont incité le développement d’une expérience variable (VER) ou d’une pratique d’addition-soustraction avec un nombre variable d’étapes. En fonction de la fréquence de simulation, VER ajuste la durée de soustraction pour chaque environnement. Le résultat est un système RL qui surmonte l’influence extrême et maintient l’efficacité de l’échantillon en apprenant des données existantes sur la politique. VER se concentre sur l’utilisation efficace d’un seul GPU. Les chercheurs ont associé VER à la technologie distribuée décentralisée présentée dans [Wijmans et al., 2020] Pour permettre une mise à l’échelle efficace de plusieurs GPU.
Après avoir mené plusieurs évaluations expérimentales, les chercheurs ont conclu que le VER entraînait une accélération significative et cohérente sur un large éventail de tâches de navigation et de manipulation mobiles dans des paramètres de simulation 3D réalistes. En particulier, VER est 60 à 100 % plus rapide (accélération 1,6 à 2x) que DD-PPO, l’état actuel de la technique pour SyncOnRL distribué, avec une efficacité d’échantillonnage équivalente à la navigation PointGoal et à la navigation ObjectGoal dans Habitat 1.0. Par rapport à DD-PPO, Habitat 2.0 VER est 150 % plus rapide (accélération 2,5x) sur un seul GPU et 170 % plus rapide (accélération 2,7x) sur 8 GPU pour les tâches de manipulation mobile (réfrigérateur/armoire ouverte, sélection/placement d’objets) . Avec une efficacité d’échantillonnage améliorée, VER est 70 % plus rapide (accélération 1,7x) sur 8 GPU de SampleFactory, l’AsyncOnRL le plus avancé actuellement disponible.
L’équipe a profité de ces accélérateurs pour former des capacités séquentielles sur les tâches de réarrangement GeometricGoal dans le Home Assistant Benchmark (HAB). Découvrez l’incroyable apparence de la navigation dans des fonctionnalités qui ne nécessitent aucune navigation. La sélection des talents implique spécifiquement que le robot choisisse quelque chose sur une table. Le robot n’a jamais été obligé de se déplacer pendant l’entraînement car il est toujours né près de la table. Cependant, le robot apprend à explorer puis à sélectionner un objet dans un environnement inconnu avec 50% de réussite, affichant étonnamment une généralisation hors distribution, selon les chercheurs, en supposant que le mouvement de la base est intégré dans l’espace de travail. VER peut être très utile lors de la recherche d’un réarrangement. Lors de l’accès aux actions de navigation, il aide à définir l’apparence de la navigation dans les stratégies qui ne nécessitent pas de navigation. Beaucoup de progrès ont été réalisés chez Tidy House grâce à cela (+30% de réussite), mais cela montre aussi qu’il n’est peut-être pas toujours préférable d’éliminer les « actions inutiles ».
Khushbu Gupta est consultant stagiaire chez MarktechPost. Elle poursuit actuellement son baccalauréat en technologie de l’Indian Institute of Technology (IIT), Goa. Elle est passionnée par les domaines de l’apprentissage automatique, du traitement du langage naturel et du développement Web. Vous aimez en apprendre davantage sur le domaine technique en participant à de nombreux défis.
NANLUX lance une gamme de nouveaux accessoires pour le puissant Evocer 2400. Ces accessoires comprennent un modulateur de Fresnel motorisé avec contrôle par application, de nouveaux réflecteurs et un nouvel accessoire de projecteur pour son « petit » frère, l’Evoc 900. Comme cela arrive souvent avec l’interaction humaine, cette courte interview aborde plusieurs autres questions intéressantes liées aux lumières, RVB, Bicolore et l’avenir des LED LED haute puissance.
Nanlux, ainsi que de nombreux autres constructeurs, participent à la révolution. L’entreprise s’est considérablement développée depuis ses modestes débuts et propose désormais certains des luminaires LED les meilleurs et les plus puissants du marché. Les produits de l’entreprise défient (et gagnent) les éclairages HMI traditionnels et fournissent désormais d’énormes puissances de sortie au grand public, ou du moins à une base d’utilisateurs beaucoup plus large.
Accessoires Nanlux Evoke 2400
L’Evocation 2400 bénéficie d’excellents accessoires, augmentant considérablement les capacités de montage. Le premier, et le plus impressionnant, est Nanlux FL-35E Lentille de Fresnel motorisée. Ce mécanisme de Fresnel utilise les contacts électroniques de la monture NL de NANLUX pour agrandir son angle de faisceau téléobjectif de 15 degrés à 46 degrés, amplifiant la sortie brute jusqu’à plus de cinq fois sa sortie de base, ce qui est en effet très élevé.
Lentille de Fresnel motorisée NANLUX FL-35E. Crédit image : CinéD
Le Fresnel motorisé peut être utilisé via APP, DMX, connexion Ethernet, etc. NANLUX couvre pratiquement toutes les approches traditionnelles, permettant un contrôle rapide et facile du type de groupes indépendants temporaires, ainsi que des grands studios, où une connexion filaire fiable est essentielle. Le processus est très simple et direct. Après la mise à jour du firmware, vous pourrez contrôler l’angle du faisceau de Fresnel depuis l’application NANLUX.
Contrôle d’application de lentille de Fresnel avec moteur NANLUX. Crédit image : CinéD
Outre la lentille de Fresnel motorisée Nanlux FL-35E et son application, NANLUX lancera également deux réflecteurs supplémentaires. Le réflecteur actuel, inclus avec l’Evoc 2400, est un réflecteur à 45 degrés. L’entreprise ajoutera des réflecteurs à 30 degrés et 60 degrés à la liste.
Apportez un projecteur 900/1200
NANLUX annonce également un projecteur dédié à la série Evoc 900/1200. Le PJ-NLM EV1200-15-30 est un nom assez long pour décrire un projecteur zoom avec un angle de faisceau de 15° à 30°.
Cet appareil est une sorte de « version 2.0 » de l’entreprise Objectif de projection existant Mais avec le mécanisme de zoom amovible supplémentaire et un dissipateur thermique plus grand. Le dissipateur thermique agrandi devrait permettre plus de flexibilité avec des options de lentilles supplémentaires.
Aspects d’éclairage supplémentaires (jeu de mots)
Dans la seconde moitié de l’interview, Jeremy Jay, représentant de NANLUX, a révélé quelques informations intéressantes sur les produits NANLUX, leur popularité et leur facilité d’utilisation. Une caractéristique importante qu’il a mentionnée est la compatibilité de l’Evoque 2400 avec les prises électriques domestiques américaines. La popularité de cette fonctionnalité a été analysée en détail dans notre propre étude menée par Graham Ehlers Sheldon, et ce n’est pas une surprise.
Le NANLUX Evoce 900, annoncé l’année dernière, a également été exploré pour sa plus grande puissance de couleur, ses lumières RVB par rapport aux gels, entre autres fonctionnalités. La discussion couvre également l’évolution du marché des LED, qui est devenu suffisamment fort pour dépasser la popularité des appareils IHM traditionnels.
Prix et disponibilité
le Nanlux FL-35E La lentille de Fresnel motorisée coûte 1 700 $ et sera expédiée vers mai 2024. Les prix des autres accessoires évoqués n’ont pas encore été déterminés. Les délais d’expédition n’ont pas été révélés à ce stade mais devraient suivre peu de temps après la sortie de la lentille de Fresnel motorisée.
Possédez-vous vous-même un NANLUX Evoc 2400 ? Vous en louez un de temps en temps, ou est-ce trop grand pour vos besoins ? Les derniers accessoires affecteront-ils votre entreprise ? Faites le nous savoir dans les commentaires.
Commentez la photo, Promethean intègre l'IA dans ses outils de développement de jeux
Andrew Maximoff travaille dans l'industrie des jeux vidéo depuis 12 ans, mais malgré toute cette expérience, il est toujours émerveillé par la somme d'argent dépensée pour créer les plus grands jeux.
« Je travaillais chez PlayStation et le dernier jeu sur lequel j'ai travaillé, la production à elle seule nous a coûté 220 $. [£176m] »Ensuite, doublez ce montant pour le marketing, et vous obtenez un demi-milliard de dollars pour chaque jeu que vous publiez, ce qui est assez insoutenable pour la plupart des entreprises. »
Il estime que l’intelligence artificielle (IA) jouera un rôle crucial dans la réduction des coûts élevés de production de jeux, en permettant aux concepteurs de jeux vidéo de gagner un temps vital en automatisant les tâches répétitives.
Sa société Promethean AI propose aux développeurs une suite d'outils pour créer leurs mondes virtuels. Maximov espère changer la façon dont les jeux sont actuellement produits.
« Ce que nous essayons de faire, c'est de remplacer cela par un système capable d'apprendre directement des artistes, afin que ceux-ci puissent être les auteurs de leur propre automatisation. »
Les humains joueront toujours un rôle majeur dans le processus de production. L’IA travaillera aux côtés des humains et leur permettra d’être plus créatifs.
« Nous pouvons créer une vision pour le jeu, puis l'artiste peut cliquer sur un bouton et demander à l'IA de lui donner des commentaires. Ensuite, il obtiendra des exemples de sa bibliothèque d'art conceptuel et d'idées numériques pertinents pour son projet », a déclaré M. dit Maximov.
«Je me souviens d'une fois où nous essayions de construire un commissariat de police et nous avons demandé à l'IA de le remplir, et elle est revenue avec un beignet sur chaque bureau.
« Une autre fois, nous construisions un appartement et il n'arrêtait pas de mettre une chaussette sous la table basse. Nous nous demandions si c'était une erreur, mais il s'avère que nous l'avons décrit comme un appartement de garçon, donc je suppose que cela avait du sens », dit-il. .
Source des images, Getty Images
Commentez la photo, Produire des jeux informatiques à grande échelle est devenu complexe et coûteux
La société californienne de logiciels Inworld utilise également l’intelligence artificielle pour créer des éléments de jeux informatiques.
Il a créé un moteur qui permet aux développeurs d'ajouter du réalisme aux mondes du jeu et de la profondeur émotionnelle aux personnages. La société travaille également sur ce qu’elle appelle un graphe narratif, développé en partenariat avec Xbox, qui utilisera l’intelligence artificielle pour aider à créer des histoires.
Le PDG Kellan Gibbs a déclaré à la BBC qu'il pensait que l'IA permettrait aux développeurs de « rêver plus grand que jamais ».
«Le moteur permet aux développeurs d'ajouter des agents d'IA capables de voir, de ressentir et de percevoir le monde qui les entoure, tout en interagissant avec les joueurs et en effectuant des actions dans le jeu. Lorsque vous pouvez imprégner des personnages virtuels de capacités cognitives avancées, cela ouvre tout un monde. nouveau paradigme pour la narration et le gameplay », dit-il.
Nick Walton est le PDG de la société de jeux Latitude.io et estime que l'IA a le pouvoir de personnaliser l'expérience de jeu.
« Nous ne faisons que commencer avec l'IA et, au fur et à mesure de sa progression, nous verrons des mondes très dynamiques et adaptatifs avec des personnages qui semblent vivants, avec des arcs d'histoire dans lesquels vous, en tant que héros, faites des choses uniques et avez un impact tout à fait unique sur le monde.
« Vous pouvez jouer à un jeu dans lequel vous trouvez une ville dont personne d'autre ne se soucie et dans laquelle aucun autre joueur n'a passé du temps, et vous pouvez vraiment y investir et développer des relations avec tous les personnages qui s'y trouvent », a-t-il déclaré à la BBC. .
Source des images, Getty Images
Commentez la photo, L’IA pourrait offrir des mondes plus riches à explorer aux fans de jeux vidéo
Son entreprise a développé AI Dungeon, un jeu qui permet aux joueurs de choisir parmi une variété de mondes et d'y créer leurs propres histoires.
« C'est un peu comme ces vieilles aventures textuelles où vous écrivez une action et où le jeu détermine ensuite ce qui se passe ensuite.
« Mais la principale différence est qu'au lieu de laisser le développeur imaginer tout ce qu'il pourrait faire, l'IA peut décider de manière dynamique de ce qui se passera ensuite. Ainsi, toute action est possible. »
Il s'est dit surpris par le succès du jeu Dungeon, dont la première version a été lancée en 2019.
« Cela a commencé comme un projet parallèle que je venais de mettre en ligne et en une semaine, 100 000 personnes y ont joué », dit-il.
« Je pense qu'il y a beaucoup de rejouabilité parce que l'histoire est différente à chaque fois et que vous pouvez l'emmener dans n'importe quelle direction. Et il y a cette capacité de vrai choix qui a toujours été l'objectif de beaucoup de jeux. »
Un recours accru à l’IA pourrait avoir des répercussions sur les humains travaillant dans l’industrie.
Le PDG du géant du jeu sur PC EA, Andrew Wilson, a récemment déclaré aux délégués lors d'une conférence qu'environ 60 % des processus de développement des éditeurs de jeux pourraient être influencés par les outils d'IA. L'entreprise a récemment été licenciée 5% de ses salariés, environ 670 emplois.
Maximov ne voit pas nécessairement l'IA remplacer les humains, mais plutôt permettre aux humains plus de « dignité créative », ce que certains éditeurs de grands jeux ont perdu car les développeurs se voient confier des tâches très répétitives.
« De nombreux développeurs ont regardé Harry Potter et le Seigneur des Anneaux et ont été inspirés pour faire quelque chose de génial, mais ils passent maintenant leurs journées à mettre des pierres à l'extérieur du château pendant un an », a-t-il déclaré.
« Il y a beaucoup à dire pour restaurer le véritable objectif et la valeur de ces emplois, et pour donner à chaque artiste l'opportunité de dire : « Je peux désormais créer mon propre jeu ».
M. Gibb est d'accord. « Les concepteurs narratifs et les développeurs nous ont dit que notre plate-forme ajoute une plus grande interactivité et un plus grand engagement aux jeux, mais nécessite une contribution profonde et réfléchie de la part des humains. Pour créer l'illusion de l'intelligence, les personnages d'Inworld doivent recevoir des histoires, des souvenirs, des connaissances riches. et des artefacts. Et des objectifs – tous conçus par l'écrivain, il s'agit d'augmenter la créativité humaine.
Ziad Al Ali, MDUn épidémiologiste clinicien de la faculté de médecine de l'université de Washington à Saint-Louis a été nommé dans la première liste Time100 Health, une nouvelle liste annuelle de 100 personnes qui ont eu le plus grand impact sur la santé mondiale.
Al Ali a attiré l’attention internationale pour plus de deux douzaines d’études qu’il a menées examinant les effets à long terme sur la santé des personnes ayant contracté le COVID-19, également connu sous le nom de COVID long. Il est directeur du Centre d'épidémiologie clinique du système de santé de St. Louis pour les anciens combattants de l'Université de Washington et chef du service de recherche et de développement.
Le Très-Haut a évolué Vaste expérience dans l’extraction d’informations à partir du Big Data. En tirant parti de la puissance d'une base de données complète des dossiers de santé de plus de 10 millions de personnes, gérée par le Département américain des Anciens Combattants, le plus grand système intégré de prestation de soins de santé du pays, Al-Ali a découvert que les personnes infectées par le SRAS-CoV-2 le virus risquait de se développer à long terme à un niveau plus important, et potentiellement mortel. cœur, cerveau, collège, Digestif Et Santé psychologique problèmes par rapport à ceux qui n’en ont pas eu.
