Digital Live Art

Last Revised June 07: Please note that this is an archived page - please visit my new site www.jennifersheridan.com for more update information and musings.

Digital Live Art is the intersection of Live Art, HCI and Computing. It is the phrase I use to describe my technical design, methods, models, frameworks and performances which I developed during my PhD. I successfully defended my PhD in 2006 as fufillment for the degree of Doctor in Computer Science. Below is a list of my PhD chapters. Please contact me if you would like individual chapters.

Sheridan, J.G. Digital Live Art: Mediating Wittingness in Playful Arenas. PhD Thesis. Lancaster University, Lancaster UK. 2006.

What is Digital Live Art?

Contents

1 Introduction

1.1 Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1
     1.1.1 What is Digital Live Art? . . . . . . . . . . . . . . . . . . . . . . . . . 1
     1.1.2 Performance framing . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2
     1.1.3 Wittingness . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3
     1.1.4 Ubiquitous and pervasive environments . . . . . . . . . . . . . . . . . 5
     1.1.5 Playful arenas . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5
     1.1.6 Non-task based interaction . . . . . . . . . . . . . . . . . . . . . . . . 7
     1.1.7 Interfacelessness . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9
     1.1.8 From user as navigator to user as performer . . . . . . . . . . . . . . . 10
     1.1.9 DLA for promoting social change . . . . . . . . . . . . . . . . . . . . . 11
1.2 Structure of this thesis . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12

2 A Brief History of HCI

2.1 Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15
    2.1.1 Conversational style interaction . . . . . . . . . . . . . . . . . . . . . . 19
    2.1.2 Offering alternatives . . . . . . . . . . . . . . . . . . . . . . . . . . . . 22
    2.1.3 Direct manipulation . . . . . . . . . . . . . . . . . . . . . . . . . . . . 23
    2.1.4 Direct engagement . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24
    2.1.5 Multimodal interaction . . . . . . . . . . . . . . . . . . . . . . . . . . 25
    2.1.6 Sensor-based interaction . . . . . . . . . . . . . . . . . . . . . . . . . . 30
2.2 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 32

3 Live Art Yesterday and Today

3.1 What is live art? . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 34
3.2 Digital Live Art Today . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 41
    3.2.1 Off-body: ubiquitous environments . . . . . . . . . . . . . . . . . . . . 42
    3.2.2 Intra-body: proximity interfaces . . . . . . . . . . . . . . . . . . . . . 48
    3.2.3 On-body: wearable and removable interfaces . . . . . . . . . . . . . . 48
    3.2.4 In-hand: tangible interfaces . . . . . . . . . . . . . . . . . . . . . . . . 49
    3.2.5 In-body: implantable interfaces . . . . . . . . . . . . . . . . . . . . . . 53
    3.2.6 Mixed bodies: face-to-interfacing . . . . . . . . . . . . . . . . . . . . . 53
3.3 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 54

4 Digital Live Art Experience Projects

4.1 Street science . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 55
4.2 Homopolybots: Building Modular Humans . . . . . . . . . . . . . . . . . . . . 56
    4.2.1 Art-Cels performance party . . . . . . . . . . . . . . . . . . . . . . . . 57
4.3 Witting participant-performer: Schizophrenic Cyborg . . . . . . . . . . . . . . 62
    4.3.1 Procedure . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 63
    4.3.2 Participants . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 63
    4.3.3 Method . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64
    4.3.4 Measures . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 66
    4.3.5 Technical specifications . . . . . . . . . . . . . . . . . . . . . . . . . . 66
    4.3.6 Observations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68
    4.3.7 Discussion . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 71
4.4 Witting performer: Jenbot . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 71
    4.4.1 Procedure and Technical Specifications . . . . . . . . . . . . . . . . . . 73
    4.4.2 Participants . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 75
    4.4.3 Method . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 75
    4.4.4 Measures . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 76
    4.4.5 Observations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 76
    4.4.6 Discussion . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 80
4.5 Unwitting performance: Public Jacking . . . . . . . . . . . . . . . . . . . . . 81
    4.5.1 Procedure . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 81
    4.5.2 Participants . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 82
    4.5.3 Method . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83
    4.5.4 Measures: other-blame . . . . . . . . . . . . . . . . . . . . . . . . . . . 84
    4.5.5 Technical Specification . . . . . . . . . . . . . . . . . . . . . . . . . . . 85
    4.5.6 Observations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 85
    4.5.7 Discussion . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 91
4.6 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93

5 Modeling Digital Live Art

5.1 Interpretation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97
5.2 Formal and structural models . . . . . . . . . . . . . . . . . . . . . . . . . . . 99
    5.2.1 User-oriented models . . . . . . . . . . . . . . . . . . . . . . . . . . . . 99
    5.2.2 Systems-oriented models . . . . . . . . . . . . . . . . . . . . . . . . . . 101
5.3 Modeling the (in)visible and the (in)tangible . . . . . . . . . . . . . . . . . . 105
5.4 Performance Triad Model . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 105
    5.4.1 Context . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
    5.4.2 Environment . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 108
    5.4.3 Technology . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 109
    5.4.4 Tripartite Interaction . . . . . . . . . . . . . . . . . . . . . . . . . . . 110
    5.4.5 Performance-centric systems: virtuosity . . . . . . . . . . . . . . . . . 111
    5.4.6 Participant-centric systems: social infection . . . . . . . . . . . . . . . 117
    5.4.7 Observer-centric systems: implication . . . . . . . . . . . . . . . . . . 122
5.5 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 124

6 Formalising Digital Live Art

6.1 Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 127
6.2 Actions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 127
6.3 Perception . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 129
6.4 Influences . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 130
6.5 Knowledge, frames and performance . . . . . . . . . . . . . . . . . . . . . . . 131
6.6 The effect of technology . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 132
    6.6.1 Analysis of Deus Oculi . . . . . . . . . . . . . . . . . . . . . . . . . . . 133
    6.6.2 Analysis of Ping Body . . . . . . . . . . . . . . . . . . . . . . . . . . . 136
6.7 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 138

7 Computationally-augmented Poi

7.1 Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 140
7.2 The process . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 145
    7.2.1 Preservation and augmentation . . . . . . . . . . . . . . . . . . . . . . 147
    7.2.2 Design: sensor selection . . . . . . . . . . . . . . . . . . . . . . . . . . 148
    7.2.3 Prototyping . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 150
    7.2.4 Participants as performers . . . . . . . . . . . . . . . . . . . . . . . . . 155
    7.2.5 Augmented poi performance test . . . . . . . . . . . . . . . . . . . . . 158
    7.2.6 Results . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 159
    7.2.7 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 160
7.3 Redevelopment . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 161
    7.3.1 Hardware . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 161
    7.3.2 Software . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 162
    7.3.3 Out-of-lab experience . . . . . . . . . . . . . . . . . . . . . . . . . . . 162
    7.3.4 Technical set up . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 163
    7.3.5 Observations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 163
    7.3.6 Performance classes . . . . . . . . . . . . . . . . . . . . . . . . . . . . 167
    7.3.7 Transition in wittingness . . . . . . . . . . . . . . . . . . . . . . . . . . 170
    7.3.8 Formal method for computationally-augmented poi . . . . . . . . . . . 172
7.4 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 174

8 Conclusion

List of Figures
List of Tables