Sélectionner une page

Dernières Brèves

Des chercheurs peuvent désormais modéliser une pièce en 3D à partir des reflets de vos yeux

29 Juin 2023 | Brèves

modélisation 3D reflets yeux 1 23

La technologie du champ de rayonnement neuronal (NeRF pour Neural radiance field) commence à montrer d’incroyables capacités à transformer des images et des vidéos 2D en modèles 3D, mais des chercheurs de l’université du Maryland (Etats-Unis) ont franchi une nouvelle étape en n’utilisant rien d’autre que les reflets de l’œil.

Pour donner un exemple de la technologie NeRF, imaginez que vous marchez autour d’une scène en prenant des photos ou des vidéos avec un smartphone, puis vous téléchargez les résultats vers un service où un réseau neuronal utilise une variété de techniques d’intelligence artificielle pour prendre une séquence d’images du monde réel et l’utiliser pour construire un modèle en 3D de votre sujet et de son environnement.

Dans une étude en prépublication (pas encore évaluée par les pairs), des chercheurs montrent comment ils sont capables de prendre plusieurs images haute définition d’une personne se déplaçant dans une pièce, puis de zoomer pour observer les reflets dans leur cornée, de les retourner, de supprimer la couleur et les détails que l’iris pourrait ajouter, de les traiter pour supprimer la distorsion du miroir incurvé et de les utiliser pour créer des images en 3D.

Présentation de la procédure de reconstruction 3D. (world-from-eyes.github.io)

modélisation 3D reflets yeux 1 23

Certes, ces modèles 3D ne sont pas de très haute résolution. On peut distinguer les objets, mais pas dans les moindres détails, et l’équipe a dû utiliser un éclairage spécifique pour faire ressortir l’effet. Et il est difficile de dire exactement qui aurait besoin de ce type de technologie, et pour quoi, à moins qu’il ne s’agisse d’un scénario de type « Mission Impossible ».

Les chercheurs ont imaginé un scénario réel pour tester ce matériel : ils ont zoomé sur les reflets des yeux dans des clips vidéo de Miley Cyrus et de Lady Gaga, en espérant tirer parti d’une vision rapprochée de qualité et de situations d’éclairage favorables. Malheureusement, la résolution n’était pas suffisante et le résultat le plus proche qu’ils ont pu obtenir est que Miley Cyrus regardait peut-être une grille d’éclairage et que Lady Gaga regardait peut-être quelque chose qui ressemblait très légèrement au torse d’une personne.

Quoi qu’il en soit, c’est un aperçu fascinant de la quantité d’informations que l’on peut tirer d’une scène. Cela rappelle un peu une idée folle que le MIT a étudiée en 2014, dans laquelle ils ont réussi à reconstruire une partie de l’audio à l’intérieur d’une pièce scellée en prenant une vidéo à grande vitesse d’un paquet de chips et en l’analysant pour la distorsion afin de construire une forme d’onde audio.

A découvrir sur le site dédié à ces travaux : Seeing the World Through Your Eyes.

Il n’y a aucune publicité sur GuruMeditation et le Guru ne compte que sur la reconnaissance de ses lecteurs/ lectrices.

Merci pour votre aide !

Derniers Articles

  • Le Guru fait une pause dans ses écrits, car il a besoin de votre soutien !
    Le Guru lance un appel aux dons afin de l’aider à poursuivre son activité…...
  • Un orang-outan est le premier non-humain à soigner des blessures à l’aide d’une plante médicinale
    ]Un orang-outan sauvage mâle de Sumatra a été observé en train d'appliquer les feuilles mâchées d'une plante aux propriétés médicinales connues sur une plaie de sa joue. Il s'agirait du premier cas documenté de traitement actif d'une plaie par un animal sauvage à l'aide d'une substance végétale biologiquement active connue. Les chercheurs ont observé l'orang-outan, qu'ils ont baptisé Rakus, en juin 2022 dans la zone de recherche de Suaq Balimbing, dans le parc national de......
  • Des chercheurs reconstituent le visage d’une Néandertalienne à partir d’un crâne écrasé vieux de 75 000 ans
    Une équipe de paléo-archéologues est présentée dans un nouveau documentaire dans lequel ces experts ont reconstitué le visage d'une femme néandertalienne ayant vécu il y a 75 000 ans. Le crâne, écrasé en centaines de fragments probablement par un éboulement après la mort, a été déterré en 2018 dans la grotte de Shanidar, au Kurdistan irakien. Baptisés Shanidar Z, les restes du Néandertalien sont peut-être la partie supérieure d'un squelette découvert dans......
  • Des scientifiques créent des cerveaux hybrides souris-rat avec des neurones des deux espèces
    Des chercheurs américains ont utilisé une technique spéciale pour éliminer les neurones de souris en développement, qu'ils ont remplacés par des cellules souches de rat. Ces cellules se sont transformées en neurones de rat dans le cerveau de la souris, qui est AINSI devenu un cerveau hybride. Chose remarquable, les rongeurs modifiés sont en bonne santé et se comportent normalement, ce qui est très prometteur pour les thérapies régénératives neuronales. Les recherches ont été menées par deux équipes indépendantes, qui ont publié leurs résultats......

modélisation 3D reflets yeux 1 23

La technologie du champ de rayonnement neuronal (NeRF pour Neural radiance field) commence à montrer d’incroyables capacités à transformer des images et des vidéos 2D en modèles 3D, mais des chercheurs de l’université du Maryland (Etats-Unis) ont franchi une nouvelle étape en n’utilisant rien d’autre que les reflets de l’œil.

Pour donner un exemple de la technologie NeRF, imaginez que vous marchez autour d’une scène en prenant des photos ou des vidéos avec un smartphone, puis vous téléchargez les résultats vers un service où un réseau neuronal utilise une variété de techniques d’intelligence artificielle pour prendre une séquence d’images du monde réel et l’utiliser pour construire un modèle en 3D de votre sujet et de son environnement.

Dans une étude en prépublication (pas encore évaluée par les pairs), des chercheurs montrent comment ils sont capables de prendre plusieurs images haute définition d’une personne se déplaçant dans une pièce, puis de zoomer pour observer les reflets dans leur cornée, de les retourner, de supprimer la couleur et les détails que l’iris pourrait ajouter, de les traiter pour supprimer la distorsion du miroir incurvé et de les utiliser pour créer des images en 3D.

Présentation de la procédure de reconstruction 3D. (world-from-eyes.github.io)

modélisation 3D reflets yeux 1 23

Certes, ces modèles 3D ne sont pas de très haute résolution. On peut distinguer les objets, mais pas dans les moindres détails, et l’équipe a dû utiliser un éclairage spécifique pour faire ressortir l’effet. Et il est difficile de dire exactement qui aurait besoin de ce type de technologie, et pour quoi, à moins qu’il ne s’agisse d’un scénario de type « Mission Impossible ».

Les chercheurs ont imaginé un scénario réel pour tester ce matériel : ils ont zoomé sur les reflets des yeux dans des clips vidéo de Miley Cyrus et de Lady Gaga, en espérant tirer parti d’une vision rapprochée de qualité et de situations d’éclairage favorables. Malheureusement, la résolution n’était pas suffisante et le résultat le plus proche qu’ils ont pu obtenir est que Miley Cyrus regardait peut-être une grille d’éclairage et que Lady Gaga regardait peut-être quelque chose qui ressemblait très légèrement au torse d’une personne.

Quoi qu’il en soit, c’est un aperçu fascinant de la quantité d’informations que l’on peut tirer d’une scène. Cela rappelle un peu une idée folle que le MIT a étudiée en 2014, dans laquelle ils ont réussi à reconstruire une partie de l’audio à l’intérieur d’une pièce scellée en prenant une vidéo à grande vitesse d’un paquet de chips et en l’analysant pour la distorsion afin de construire une forme d’onde audio.

A découvrir sur le site dédié à ces travaux : Seeing the World Through Your Eyes.

Il n’y a aucune publicité sur GuruMeditation et le Guru ne compte que sur la reconnaissance de ses lecteurs/ lectrices.

Merci pour votre aide !

Le plus haut observatoire du monde entre en fonction au Chili

Pour le Livre Guinness des records, l’Observatoire d’Atacama de l’Université de Tokyo (TAO) est l’observatoire astronomique le plus haut du monde.

Le TAO se trouve à une altitude de 5 640 mètres au sommet d’une montagne dans le désert d’Atacama, au nord du Chili. Le télescope de 6,5 m optimisé pour les infrarouges est enfin opérationnel après 26 ans de planification et de construction…

La voile solaire avancée de la NASA s’est déployée sans encombre dans l’espace

La NASA a lancé son système de voile solaire composite avancé (Advanced Solar Sail) à bord d’une fusée Electron de RocketLab, déployant ainsi une voile de 9 mètres en orbite terrestre basse…

Des millions de joueurs du jeu vidéo Borderlands 3 font avancer la recherche biomédicale

Plus de 4 millions de joueurs jouant à un mini-jeu de science citoyenne dans le jeu vidéo Borderlands 3 ont aidé à reconstituer l’histoire de l’évolution microbienne des bactéries de l’intestin humain…

La vieille sonde Voyager 1 de la NASA rétablit la transmission de ses données après 5 mois de charabia

La sonde Voyager 1 a renvoyé des données exploitables pour la première fois depuis plus de 5 mois, ce qui laisse espérer que la mission, vieille de 46 ans, pourra enfin reprendre ses activités normales.

La sonde interstellaire préférée de la NASA a transmis samedi au centre de contrôle de la mission des données sur la santé et l’état de ses systèmes embarqués…

Photos : Lorsque deux satellites dans des directions opposées se croisent dans l’espace à 10 000 km/h

La sonde Lunar Reconnaissance Orbiter (LRO) de la NASA a pris une photo parfaitement synchronisée lorsqu’elle a croisé le chemin d’un autre engin spatial en orbite autour de la lune.

La sonde LRO, qui est en orbite autour de la lune depuis 15 ans, a pris plusieurs images de l’orbiteur lunaire Danuri de l’Institut de recherche aérospatiale de Corée, alors que les deux engins spatiaux, voyageant sur des orbites presque parallèles, se sont croisés dans des directions opposées au cours de trois orbites entre le 5 et le 6 mars…

Le professeur physicien Peter Higgs, célèbre pour avoir prédit l’existence du boson de Higgs, meurt à l’âge de 94 ans

Le professeur Peter Higgs, lauréat du prix Nobel, physicien théoricien britannique célèbre pour avoir prédit l’existence d’une nouvelle particule, le boson de Higgs, est décédé lundi 8 avril. L’université d’Édimbourg, où Higgs était professeur émérite, a annoncé mardi qu’il était « décédé paisiblement chez lui … à la suite d’une courte maladie ».

Les bosons de Higgs sont l’excitation quantique du champ de Higgs, un champ qui remplit tout l’univers et qui interagit avec les particules…

Voyager 1 : Les ingénieurs de la NASA ont repéré la puce défectueuse qui pourrait permettre de réparer l’ordinateur de la plus vieille sonde spatiale

L’une des plus anciennes (47 ans) et des plus lointaines sondes envoyées dans l’espace par l’humain, la sonde Voyager 1 souffre d’une importante défaillance qui l’empêche de transmettre des données scientifiques ou techniques vers la Terre. Les ingénieurs de la NASA ont réduit le problème de la sonde Voyager 1 à une seule puce défectueuse. Il pourrait désormais être possible de contourner la mémoire corrompue et de remettre la sonde interstellaire en état de marche…

Le Guru fait une pause dans ses écrits, car il a besoin de votre soutien !

Le Guru lance un appel aux dons afin de l’aider à poursuivre son activité…

Un orang-outan est le premier non-humain à soigner des blessures à l’aide d’une plante médicinale

]Un orang-outan sauvage mâle de Sumatra a été observé en train d’appliquer les feuilles mâchées d’une plante aux propriétés médicinales connues sur une plaie de sa joue. Il s’agirait du premier cas documenté de traitement actif d’une plaie par un animal sauvage à l’aide d’une substance végétale biologiquement active connue.

Les chercheurs ont observé l’orang-outan, qu’ils ont baptisé Rakus, en juin 2022 dans la zone de recherche de Suaq Balimbing, dans le parc national de…

Des chercheurs reconstituent le visage d’une Néandertalienne à partir d’un crâne écrasé vieux de 75 000 ans

Une équipe de paléo-archéologues est présentée dans un nouveau documentaire dans lequel ces experts ont reconstitué le visage d’une femme néandertalienne ayant vécu il y a 75 000 ans.

Le crâne, écrasé en centaines de fragments probablement par un éboulement après la mort, a été déterré en 2018 dans la grotte de Shanidar, au Kurdistan irakien. Baptisés Shanidar Z, les restes du Néandertalien sont peut-être la partie supérieure d’un squelette découvert dans…

Des scientifiques créent des cerveaux hybrides souris-rat avec des neurones des deux espèces

Des chercheurs américains ont utilisé une technique spéciale pour éliminer les neurones de souris en développement, qu’ils ont remplacés par des cellules souches de rat. Ces cellules se sont transformées en neurones de rat dans le cerveau de la souris, qui est AINSI devenu un cerveau hybride. Chose remarquable, les rongeurs modifiés sont en bonne santé et se comportent normalement, ce qui est très prometteur pour les thérapies régénératives neuronales.

Les recherches ont été menées par deux équipes indépendantes, qui ont publié leurs résultats…

La vie s’est épanouie alors que le champ magnétique de la Terre a failli disparaître il y a 590 millions d’années

Le champ magnétique terrestre a failli s’effondrer il y a quelque 590 millions d’années, exposant vraisemblablement la vie à la surface de la planète à un risque d’augmentation du rayonnement cosmique.

Selon de nouvelles recherches, l’affaiblissement temporaire du bouclier magnétique aurait pu être tout sauf une catastrophe biologique. En fait, il pourrait avoir augmenté les niveaux d’oxygène, créant ainsi les conditions idéales pour l’épanouissement des premières formes de vie…

Les “rayures de tigre” de la lune de Saturne, Encelade, sont liées à ses spectaculaires geysers

Les mouvements des lignes de faille de la croûte gelée d’Encelade, une des lunes de Saturne, pourraient être à l’origine des panaches de matière glacée qui s’échappent du ventre aqueux de la lune, selon une équipe de chercheurs qui a récemment modélisé ces mouvements.

L’étude de l’équipe s’est concentrée sur les “rayures de tigre” d’Encelade, de longues fissures situées principalement dans les parties méridionales de la lune, que certains pensent avoir été causées par un ancien impact. D’autres chercheurs ont…

Plus de 90 % des oiseaux polaires sont contaminés par des microplastiques

Le plastique est pratiquement partout sur Terre. De la plus haute montagne aux plus grandes profondeurs des océans, des régions polaires à l’intérieur de notre corps, il n’y a plus moyen d’y échapper. Bien que la pollution plastique soit loin d’être un nouveau problème, l’ampleur de la pollution par les microplastiques n’est apparue que récemment.

La pollution plastique est généralement divisée en macroplastiques (>5 cm), microplastiques (0,1 µm-5 mm) et nanoplastiques (<0,1 µm). Plus le plastique est...

Pin It on Pinterest

Share This