Prof. Dr. Fleming

Visuelle Kategorisierung und Vorhersage von deformierbaren MaterialienC1

Geplante Forschung

Projekt C1 erkundet die Kategorisierung von deformierbaren Materialien wie z.B. Stoff oder Flüssigkeiten. Mittels am Computer simulierten Materialien werden wir messen, wie erlernte Kategorien auf neue Exemplare generalisiert werden. Wir werden testen, ob Probanden die Bewegungen von deformierbaren Material bei der Interaktion mit anderen Objekten vorhersagen können. Menschliche Kategorisierung wird modelliert durch maschinelles Lernen, basierend auf der Analyse der 3D-Struktur der simulierten Materialien. Wir nehmen an, dass Beobachter generative Modelle der „typischen“ Erscheinungsweise von Materialien erlernen, die dann Kategorisierung und Vorhersage ermöglichen.

Laufende Forschung

Mittels am Computer simulierten Materialien werden wir messen, wie erlernte Kategorien auf neue Exemplare generalisiert werden. Wir werden testen, ob Probanden die Bewegungen von deformierbaren Material bei der Interaktion mit anderen Objekten vorhersagen können. Menschliche Kategorisierung wird modelliert durch maschinelles Lernen, basierend auf der Analyse der 3D-Struktur der simulierten Materialien. Wir nehmen an, dass Beobachter generative Modelle der „typischen“ Erscheinungsweise von Materialien erlernen, die dann Kategorisierung und Vorhersage ermöglichen.

Neue Projektrelevante Veröffentlichungen

  • Fleming, R. W. (2014). Visual Perception of Materials and their Properties. Vision Research, 94, 62-75. find paper
  • Fleming, R. W. (2017). Material Perception. Annual Reviews of Vision Science, 3, 8.1–8.24. find paper
  • Muryy, A. A., Fleming, R. W., & Welchman, A. E. (2016). ‘Proto-rivalry’: how the binocular brain identifies gloss. Proceedings of the Royal Society of London B, 283, 20160383. DOI find paper
  • Paulun, V., Schmidt, F., van Assen, J. J. R., & Fleming, R. W. (2017). Shape, motion and optical cues to stiffness of elastic objects. Journal of Vision, 17(1):20, 1-22. DOI find paper
  • Schmidt, F., & Fleming, R. W. (2016). Visual perception of complex shape-transforming processes. Cognitive Psychology, 90, 48-70. DOI find paper
  • Schmidt, F., Hegele, M., & Fleming, R. W. (2017). Perceiving animacy from shape. Journal of Vision, in press. find paper
  • Schmidt, F., Paulun, V. C., van Assen, J. J. R., & Fleming, R. W. (2017). Inferring the stiffness of unfamiliar objects from optical, shape, and motion cues. Journal of Vision, 17(3):18, 1-17. DOI find paper
  • Schmidt, F., Spröte, P., & Fleming, R. W. (2016). Perception of shape and space across rigid transformations. Vision Research, 126, 318-329. DOI find paper
  • Spröte, P., & Fleming, R. W. (2016). Bent out of shape: The visual inference of non-rigid shape transformations applied to objects. Vision Research,126, 330-346. DOI find paper
  • Spröte, P., Schmidt, F., & Fleming, R.W. (2016). Visual perception of shape altered by inferred causal history. Scientific Reports, 6:36245. DOI find paper
  • Van Assen, J. J. R., Barla, P., & Fleming, R. W. (2018). Visual features in the perception of liquids. Current Biology, 28(3), 452-458. find paper
  • Vergne, R., Barla, P., Bonneau, G. P., & Fleming, R. (2016). Flow-Guided Warping for Image-Based Shape Manipulation. ACM Transactions on Graphics (Proceedings of SIGGRAPH), 35(4): 93. DOI find paper
  • van Assen, J. J. R., & Fleming, R. W. (2016). Influence of optical material properties on the perception of liquids. Journal of Vision, 16(15):12, 1–20. DOI find paper

Ältere projektrelevante Veröffentlichungen

  • Cholewiak, S.A., Fleming, R.W. and M. Singh (2013). Perception of the physical stability of asymmetrical threedimensional objects. Journal of Vision, 13(4): 12.
  • Doerschner, K. Fleming, R.W., Yilmaz, O., Schrater, P.R., Hartung, B. and Kersten, D. (2011). Visual Motion and the Perception of Surface Material. Current Biology, 21(23): 1-7.
  • Fleming, R. W., D. Holtmann-Rice, and H. H. Bülthoff (2011). Estimation of 3D shape from image orientations. Proceedings of the National Academy of Sciences, 108(51) 20438–20443.
  • Fleming, R. W., Dror, R. O. and E. H. Adelson (2003). Real world illumination and the perception of surface reflectance properties. Journal of Vision, 3(5), 347–368.
  • Fleming, R. W., Torralba, A. and Adelson, E. H. (2004). Specular reflections and the perception of shape. Journal of Vision, 4(9), 798–820.
  • Fleming, R.W. (2012). Dispatch—Human Perception: Visual Heuristics in the Perception of Glossiness. Current Biology, 22(20):R865-R866.
  • Fleming, R.W., Jäkel, F. and L. T. Maloney (2011). Visual Perception of Thick Transparent Materials. Psychological Science, 22(6): 812-820.
  • Muryy, A., Welchman, A.E. and Blake, A and R.W. Fleming (2013). Specular reflections and the estimation of shape from binocular disparity. PNAS, 110(6): 2413-2418.