Changes in Attitude, Behaviours, and Cognition

[kwakenglish]

So now, we all know the technical setup of VR to achieve this embodiment illusion. But I know you've been doing some really interesting work which basically is about using this illusion to actually change people's attitude, behavior, and cognition. Can you share some of these interesting experiment with us here?

Yes. This is the other point of VR which is difficult to do with physical props. You can look down, you can see a virtual body replacing a real body but we can also program it. There's a mirror in front of you that you can see a reflection of your virtual body in the mirror, a virtual mirror. 

Once again, as I move my real body, I would see my virtual body from the first-person perspective doing the same and I would also see my reflection in the mirror doing the same or the reflection of my virtual body. Remember, this is life-sized, it's the same size as your real body. Or it can be different sizes from your real body but basically, it's life-size. If you can do that, you can also do something else which is you can change the body. It doesn't have to look anything like you. I might be a man and I looked down and I have a female body or a child body or a body of a different race. 

What we became interested in is, what happens when you embody someone in a virtual body, you give them this feeling of body ownership, that this body is theirs, and the body is nothing like theirs, is somehow different. It's different in various ways. We've done various different studies on this. I want to mention is the first one, the adult-child one. What we did is we took out adults and we put them in a child body. When they look down to themselves, they look a childlike body. Children have different proportions of the body than adults do, so it looked childlike. They soar in a mirror as well. And as they move, the virtual body moves the same. 

Both seen from the first-person perspective and in the mirror. So in that experiment, we had two groups. One group had the virtual body as the child body, and the other group, everything was the same but their virtual body was an adult body but deliberately shrunk down to the same size as the child. So in other words, both had small bodies but one was shaped like an adult body and one was shaped like a child body. And what we were interested in was two things. 

One was their sense of space and the second was their sense of identity. What we did is before the experiment, we trained people to measure the sizes of objects in the environment by using their hands. They'd see an object, we'd say, "Put your hands in the same size of that object." Then they go like this. And then we give them feedback until eventually, they learned how to do it pretty well. And then I had this stimulation just five, six minutes being in a virtual body, a child body or an adult body of the same size. 

Then at the end of that period, we did the same. We asked them to use their hands to measure the size of objects. And what we found is that although everybody as we expected overestimated because they were smaller, everyone was smaller, those in the child-shaped body, they overestimated more than double those who had been in the adult body. So somehow, simply having the shape of that body had altered their perception not just because of the size but because of the shape. In that experiment, we've actually replicated again recently and we've got the same results. And the other thing is we did what was called an Implicit Association Test which asked people to categorize us very rapidly aspects of their own identity. 

Those who'd been in the child body, they categorized themselves far more as childlike than those who'd been in the adult body. So this is one example. Should I give some more examples? Oh yes. I'd be really interested in you telling us about the racial bias one. I think that's definitely one with very interesting social implications. Yes. So I should say that one on the child body has some practical applications because we did a study where we took parents from a local school and we put them in a child body. While they were in the child body, in came a mother and the mother was either a nice mother or a nasty mother. We had them two weeks running, one week they had the nice mother, next week the nasty mother or the other way around. 

And what they came back and told us the second week, whatever role that they did it in was that, "Wow. This really affected me. I realized how scary it was to be this little being with this great big mother who was having to look up with." And so during the week, when I spoke to my child, I got down on my knees and brought myself to the same height as the child. I had a very interesting effect. The whole experiment had a very interesting effect on people's sense of empathy with their children. The thing we moved on round about the same time was looking at racial bias.

자, 이제 우리는 VR의 기술적 설정을 알고 있습니다. 이런 착시현상을 실현하기 위해서죠. 하지만 저는 여러분이 정말 흥미로운 일을 하고 있다는 것을 압니다. 기본적으로 이 환상을 이용해서 사람들의 태도, 행동, 인식을 바꾸는 것입니다. 이 흥미로운 실험들을 여기서 우리와 공유할 수 있나요?

네, 이게 또 다른 VR의 또 다른 포인트인데 물리적 소품으로는 할 수 없습니다. 아래를 보시면, 실제 몸을 대체하는 가상의 몸을 볼 수 있지만, 프로그래밍도 할 수 있습니다. 거울 앞에 가상의 몸체가 반사되는 것을 볼 수 있는 거울, 가상의 거울이 있습니다. 

다시 한 번, 제가 제 실제 몸을 움직일 때, 저는 제 가상 몸을 1인칭의 시각에서 볼 수 있었고, 또한 거울에 비친 제 모습이 똑같이 보이거나, 제 가상 몸을 반사하는 것을 볼 수 있었습니다. 기억하세요, 이것은 여러분의 실제 신체와 같은 크기입니다. 아니면 여러분의 실제 신체와 다른 크기가 될 수도 있지만, 기본적으로, 그것은 실제 크기입니다. 만약 여러분이 그렇게 할 수 있다면, 여러분은 몸을 바꿀 수 있는 다른 무언가를 할 수도 있습니다. 당신처럼 보일 필요는 없어요. 나는 남자일 수도 있고 아래를 내려다보았고 나는 여자 몸이나 어린 몸이나 다른 인종의 몸을 가지고 있습니다. 

우리가 관심을 갖게 된 것은, 가상의 신체에 누군가를 임프로비제이션하고, 그들에게 이 신체는 그들의 것이고, 몸은 그들의 것과 전혀 다르다는 것입니다. 여러 가지 면에서 차이가 있습니다. 우리는 이것에 대해 다양한 연구를 해왔습니다. 제가 말씀드리고 싶은 것은 첫째, 어른 아이입니다. 우리가 한 일은 어른들을 데리고 어린아이에 몸을 담았습니다. 자기 자신을 내려다볼 때, 그들은 어린아이처럼 보입니다. 아이들은 어른들과 몸의 비율이 달라서 어린아이처럼 보였어요. 거울에서도 날아오릅니다. 그리고 그들이 움직이면서, 가상의 몸도 똑같이 움직입니다. 

둘 다 1인칭 시선과 거울에서 볼 수 있습니다. 그래서 그 실험에서, 우리는 두 개의 그룹을 가지고 있었습니다. 한 그룹은 가상의 몸을 자식의 몸과 같았고, 다른 그룹은 모든 것이 같았지만 그들의 가상의 몸은 어른의 몸이었지만 의도적으로 아이와 같은 크기로 줄어들었습니다. 다시 말해서, 둘 다 작은 몸을 가졌지만 하나는 어른의 몸처럼 생겼고 하나는 어린 아이의 몸처럼 생겼다는 것입니다. 그리고 우리가 관심을 가졌던 것은 두 가지입니다. 

하나는 공간 감각이었고, 두번째는 정체성 감각이었어요. 실험 전에, 우리는 사람들이 그들의 손으로 환경의 물체의 크기를 측정하도록 훈련시켰습니다. 그들은 어떤 물체를 보고, 우리는 이렇게 말하곤 했습니다. "그 물체와 같은 크기로 손을 대세요." 그러면 이렇게 되는 거죠. 그리고 나서 우리는 그들에게 피드백을 줍니다. 결국 그들이 어떻게 그것을 잘 하는지 배울 때까지 말이죠. 그리고 나서 저는 이 자극을 단지 5~6분 동안 가상의 몸, 어린이 몸 또는 같은 크기의 성체 안에 있었습니다. 

그리고 나서 그 기간이 끝날 때, 우리도 그렇게 했습니다. 우리는 그들에게 물체의 크기를 측정하기 위해 손을 사용하라고 요청했습니다. 그리고 우리가 발견한 것은 모든 사람들이 우리가 예상했던 대로, 그들이 더 작았기 때문에, 모든 사람들이 더 작았기 때문에, 어린이 모양의 몸에 있는 사람들은, 성인의 몸에 있었던 사람들의 두 배 이상을 과대평가했다는 것입니다. 그래서 어찌되었든, 단순히 그 몸의 모양을 갖는 것이 그들의 인식을 변화시킨 것은 단지 크기 때문만이 아니라 그 모양 때문이기도 합니다. 그 실험에서, 우리는 실제로 최근에 다시 복제했습니다. 그리고 우리는 같은 결과를 얻었습니다. 그리고 또 다른 것은 우리는 소위 "임플릿 어소시에이션 테스트"라고 불리는 것을 했습니다. 이 테스트는 사람들에게 자신의 정체성의 매우 빠른 측면을 분류하도록 했습니다. 

아동 체내에 있었던 사람들은, 성인 체내에 있었던 사람들보다 훨씬 더 어린이 같은 것으로 분류했습니다. 이것이 하나의 예입니다. 예를 좀 더 들어볼까요? 아네요 인종적 편견에 대해 말씀해 주시길 바랍니다. 저는 그것이 분명 매우 흥미로운 사회적 의미를 가진 것이라고 생각합니다. 네. 그래서 제가 말씀드려야 할 것은, 저희가 지역 학교에서 부모님을 데려와 어린이 몸에 넣었던 연구를 했기 때문에, 어린이 몸에 있는 것은 실용적인 적용이 되어 있습니다. 그들이 어린아이에 있는 동안, 한 어머니가 들어왔고 그 어머니는 좋은 어머니이거나 고약한 어머니였습니다. 우리는 그들을 2주 동안 계속하게 했고, 어느 한 주 동안은 좋은 어머니를, 다음 주엔 나쁜 어머니나 그 반대편에 앉게 했습니다. 

그리고 그들이 돌아와서 우리에게 2주째에 어떤 역할을 했든, "와우. 이게 저한테 정말 영향을 줬어요. 우러러봐야 할 이 큰어머니와 이렇게 작은 사이라는 게 얼마나 무서운 일인지 깨달았어요." 그래서 일주일 동안, 아이와 이야기를 나눌 때, 저는 무릎을 꿇고 아이와 같은 높이로 올라왔습니다. 아주 재미있는 효과를 봤습니다. 이 모든 실험은 사람들의 자녀에 대한 공감도에 매우 흥미로운 영향을 미쳤습니다. 우리가 비슷한 시기에 움직였던 것은 인종적 편견을 살펴본 것입니다.

As I said, if you have a virtual body, you can program it to like whoever you want. The important thing is it moves with you and you see it from the first-person perspective and reflected in a mirror. In a series of studies actually, we took white people and we put them in a black body or a white body or a purple body, various different types of bodies. And before the experiment, we measured their racial bias using what's called an Implicit Association Test. You can find lots of information about the Implicit Association Test on a website on Harvard and it's used a lot to study biases. It's not a questionnaire, it's a very rapid reaction time test. 

Basically, if you're white and you categorize or you join together or you associate faster white faces with good attributes and black faces with bad attributes, if you do that faster than if you associate white faces with bad attributes and black faces with good attributes, then it's indicating bias. That you have somehow a preference for the white faces rather than the black faces. The whole Implicit Association Test is based on this idea. A week or a few days before the virtual reality experiment, people do this test. Then they come in, they have the virtual reality and they're embodied in one of several different kinds of bodies. 

Obviously, in a white body, in a black body, sometimes we've used the purple body so we make sure we're measuring race and not simply surprise or difference. And what we found now with four or five replications, we found that always if you spend a few minutes embodied in the black body, when you come back even a week after doing the virtual reality exposure, after having been exposed in a black body even a week later, your racial bias is less than it was the week before that you'd ever done the exposure. 

Most recently, we worked with Beatrice Hasler whose University near Tel Aviv called IDCH, and again with Dr. Bernhard Spanlang who is in our lab. We did another experiment where we embodied people in black bodies or white bodies and they interacted with a virtual partner and that virtual partner one week was white and the following week was black or the other way around. And what we found there is that when they interacted with a virtual partner, they would unconsciously mimic the body postures and behaviors of that virtual partner if they had the same virtual skin color. 

So if I'm in a black body, my virtual partner is black, then unconsciously I would imitate her or him more than if my virtual partner was white or if I'm in a white body and my virtual partner is white, I would imitate them more than if my virtual partner was black. So it's really the virtual identity dominates how your social affiliation work in virtual reality. Yes. And the mimicry as you actually knows because you've worked on it yourself. The mimicry is something very important because unconscious mimicry is usually a sign of social harmony. With these very, very simple techniques of being in a black body and it moves like you do and you see it in a mirror that for a few minutes, not talking about hours and hours, that you adopt unconsciously these different behaviors. 

And it's really important because it shows that although racial bias we think is something very deep-seated and can't be changed, these kinds of very simple multi-sensory tricks can somehow implicitly alter because with the mimicry it's very powerful because they don't know we were measuring mimicry. They had no clue what this experiment was about. Yet nevertheless, their behavior changed. This is an example of something you can do in virtual reality that you can't really do in any other way. I mean it's like role playing but role-playing is explicit, you know you're doing it. Here, you're just in a body, you see it's black. Some people say they don't even notice it and then somehow the behavior changes. Right. So it's like your behavior changed subconsciously. That's right. It's implicit. It's not something explicit. Very interesting.

말씀드렸듯이 가상의 몸을 가지고 있다면, 원하는 사람을 좋아하도록 프로그래밍할 수 있습니다. 중요한 것은 그것이 여러분과 함께 움직이며 여러분은 그것을 1인칭 관점에서 보고 거울에 비친다는 것입니다. 실제로 일련의 연구에서, 우리는 백인들을 검은 몸이나 하얀 몸 혹은 보라색 몸체에 넣었습니다. 다양한 종류의 몸이죠. 그리고 실험 전에, 우리는 암시적 연관성 테스트라고 불리는 것을 사용하여 그들의 인종적 편견을 측정했습니다. 하버드의 한 웹사이트에서 암시적 연관성 테스트에 대한 많은 정보를 볼 수 있으며, 편견을 연구하는 데 많이 이용되고 있습니다. 앙케이트가 아니라 매우 빠른 반응 시간 테스트입니다. 

기본적으로, 만약 여러분이 백인이고, 여러분이 함께 분류하거나, 결합하거나, 더 빠른 하얀 얼굴들을 좋은 속성과 나쁜 속성과 검은 얼굴을 연결한다면, 만약 여러분이 백인 얼굴을 나쁜 속성과 연관시키는 것보다 더 빨리 한다면, 그것은 편견을 나타냅니다. 검은 얼굴보다 하얀 얼굴을 더 좋아한다는 거죠 암시적 연관성 테스트는 이 아이디어를 기반으로 합니다. 가상현실 실험을 일주일이나 며칠 앞두고 사람들은 이 실험을 합니다. 그리고 그들이 들어와서 가상현실을 가지고 있고, 그것들은 여러 종류의 다른 신체들 중 하나에 구현됩니다. 

분명히, 하얀 몸체에서, 검은 몸 안에서, 우리는 가끔 보라색 몸을 사용했습니다. 그래서 우리는 단순히 놀라거나 다른 것이 아니라 인종에 대한 측정을 확실히 합니다. 그리고 지금 네다섯 번의 복제로 발견한 것은, 항상 흑체 속에 구현된 몇 분을 보내면, 가상현실 노출을 한 지 일주일이 지나도 흑체 속에 노출되어 돌아오면, 인종적 편견은 그 전 주보다 적다는 것입니다.e입니다. 

가장 최근에, 우리는 텔아비브 근처에 있는 Beatrice Hasler와 함께 IDCH라고 불렀습니다. 그리고 다시 저희 연구실에 있는 Bernhard Spanlang 박사와 함께 일했습니다. 우리는 또 다른 실험을 했습니다. 사람들은 검은 몸이나 하얀 몸을 가진 사람들을 형상화했습니다. 그들은 가상의 파트너와 상호작용했습니다. 그리고 그 가상의 파트너는 한 주 동안 백인이었습니다. 그리고 그 다음 주는 흑인이거나 그 반대였습니다. 거기서 발견한 것은 그들이 가상의 파트너와 상호작용할 때, 그들이 같은 가상의 피부색을 가지고 있다면 무의식적으로 그 가상의 파트너의 신체 자세와 행동을 흉내 낸다는 것입니다. 

그래서 만약 제가 검은 몸에 있다면, 저의 가상 파트너는 검은색이고, 무의식적으로 저는 제 가상 파트너가 흰색이거나, 제가 하얀 몸에 있고, 제 가상 파트너가 흰색이라면, 저는 가상 파트너를 더 많이 모방할 것입니다. 그래서 가상의 정체성이 가상 현실에서 어떻게 작용하는지 지배합니다. 네, 그리고 여러분이 실제로 알고 있는 흉내도 여러분이 직접 작업했기 때문입니다. 무의식적인 모방 행위는 대개 사회적 화합의 표시이기 때문에 모방은 매우 중요한 것입니다. 검은 몸에 있는 이 아주 아주 간단한 기술들로, 그것은 여러분처럼 움직입니다. 그리고 여러분은 몇 분 동안 몇 시간이고 몇 시간이고 여러분이 무의식적으로 이런 다른 행동을 하는 것을 볼 수 있습니다. 

그리고 이것은 우리가 생각하는 인종적 편견은 매우 깊이 자리잡고 있고 바꿀 수 없다는 것을 보여주기 때문에 매우 중요한 것입니다. 이런 종류의 매우 단순한 다중 감각적 속임수는 암묵적으로 바뀔 수 있습니다. 왜냐하면 그들은 우리가 모방하는 것을 알지 못하기 때문입니다. 그들은 이 실험이 무엇에 관한 것인지 전혀 알지 못했습니다. 그럼에도 불구하고, 그들의 행동은 변했습니다. 이것은 가상현실에서는 다른 방법으로는 할 수 없는 어떤 것을 보여주는 예입니다. 제 말은, 그것은 역할극과 비슷하지만 역할극은 명백합니다, 여러분은 여러분이 그것을 하고 있다는 것을 알고 있습니다. 여기, 여러분은 단지 몸 안에 있습니다. 여러분은 검은 것을 볼 수 있습니다. 아예 눈치도 못 챈다는 반응도 나오는데요, 그런데 어찌된 일인지 행동이 달라집니다. 맞아요. 그러니까 무의식적으로 행동이 바뀐 것 같아요. 맞아요. 암묵적이죠. 노골적인 것은 아닙니다. 매우 흥미롭습니다.

Introduction to Virtual Reality

곽영어