INVENTING TECHNOLOGY FOR HOMES AND FAMILIES Speaker: A.J. Bernheim - PowerPoint PPT Presentation

INVENTING TECHNOLOGY FOR HOMES AND FAMILIES Speaker: A.J. Bernheim Brush Host: Lori Pollock

Speaker & Moderator Lori Pollock A.J. Bernheim Brush Dr. ¡Lori ¡Pollock ¡is ¡a ¡Professor ¡in ¡Computer ¡and ¡ Dr. ¡A.J. ¡Bernheim ¡Brush ¡is ¡a ¡Senior ¡Researcher ¡ Informa=on ¡Sciences ¡at ¡University ¡of ¡Delaware. ¡ at ¡Microso6 ¡Research. ¡ ¡Dr. ¡Brush’s ¡research ¡ She ¡earned ¡her ¡Ph.D. ¡and ¡M.S. ¡in ¡CS ¡at ¡the ¡ area ¡is ¡Human-­‑Computer ¡Interac=on ¡with ¡a ¡ University ¡of ¡PiVsburgh. ¡Her ¡current ¡research ¡ focus ¡on ¡Ubiquitous ¡Compu=ng ¡and ¡Computer ¡ focuses ¡on ¡program ¡analysis ¡for ¡building ¡beVer ¡ Supported ¡Collabora=on ¡(CSCW). ¡ ¡Dr. ¡Brush ¡is ¡ so6ware ¡maintenance ¡tools, ¡so6ware ¡tes=ng, ¡ most ¡well ¡known ¡for ¡her ¡research ¡on ¡ energy-­‑efficient ¡so6ware ¡and ¡computer ¡science ¡ technologies ¡for ¡families ¡and ¡her ¡exper=se ¡ educa=on. ¡Dr. ¡Pollock ¡is ¡an ¡ACM ¡Dis=nguished ¡ conduc=ng ¡field ¡studies ¡of ¡technology. ¡ ¡ ¡Her ¡ Scien=st ¡and ¡was ¡awarded ¡the ¡University ¡of ¡ current ¡focus ¡is ¡home ¡automa=on ¡as ¡co-­‑leader ¡ Delaware’s ¡Excellence ¡in ¡Teaching ¡Award ¡and ¡the ¡ of ¡the ¡Lab ¡of ¡Things ¡project. ¡She ¡is ¡a ¡Senior ¡ E.A. ¡Trabant ¡Award ¡for ¡Women’s ¡Equity. ¡She ¡leads ¡ Member ¡of ¡the ¡ACM ¡and ¡was ¡honored ¡to ¡ the ¡Partner4CS, ¡a ¡projects ¡dedicated ¡to ¡integra=ng ¡ receive ¡a ¡Borg ¡Early ¡Career ¡Award ¡in ¡2010. ¡Her ¡ computer ¡science ¡in ¡middle ¡and ¡high ¡schools ¡in ¡ research ¡has ¡received ¡2 ¡best ¡paper ¡awards ¡and ¡ Delaware ¡through ¡teacher ¡professional ¡ several ¡best ¡paper ¡nomina=ons. ¡ ¡ development ¡for ¡the ¡CS10K ¡na=onal ¡efforts. ¡ ¡ ¡

Inven%ng ¡ Technology ¡for ¡ Homes ¡& ¡ Families ¡ ¡ A.J. Brush, Senior Researcher Microsoft Research ¡ ¡

Talk ¡Roadmap ¡ • My ¡Research ¡ • My ¡Job ¡ • My ¡path ¡to ¡Microso6 ¡Research ¡ ¡ • Ques=ons ¡ Microso6 ¡Research ¡

My ¡Research ¡ Ph.D. ¡in ¡computer ¡science ¡from ¡UW ¡ Human-­‑Computer ¡Interac=on ¡(HCI) ¡ I ¡study ¡and ¡build ¡technologies ¡for ¡homes ¡and ¡families. ¡ Microso6 ¡Research ¡

User-­‑Centered ¡Design ¡ Process ¡in ¡which ¡the ¡needs, ¡wants, ¡and ¡ limita=ons ¡of ¡end ¡users ¡of ¡a ¡product ¡are ¡ given ¡extensive ¡aVen=on ¡at ¡each ¡stage ¡of ¡the ¡ design ¡process. ¡(Wikipedia) ¡ Understand ¡ ¡ Build ¡Technology/ Does ¡it ¡work? ¡ Current ¡Behavior ¡and ¡ Prototype ¡ Use ¡of ¡Technology ¡ User ¡Needs ¡ Microso6 ¡Research ¡

Homes ¡& ¡families ¡ Microso6 ¡Research ¡

Built-­‑in ¡prototyping ¡lab ¡ Microso6 ¡Research ¡

Family ¡Calendaring: ¡Simple ¡Ques=ons ¡ • Are ¡we ¡free ¡for ¡dinner ¡next ¡Saturday? ¡ • Can ¡you ¡pick ¡up ¡the ¡kids ¡when ¡I ¡have ¡a ¡late ¡ mee=ng? ¡ • Are ¡there ¡any ¡conflicts ¡between ¡soccer ¡and ¡ music ¡classes? ¡ • When ¡do ¡I ¡need ¡a ¡babysiVer? ¡ • Have ¡we ¡overbooked ¡the ¡van? ¡ ¡ Microso6 ¡Research ¡

User-­‑Centered ¡Design ¡ Understand ¡ ¡ Current ¡Behavior ¡and ¡ User ¡Needs ¡ Does ¡it ¡work? ¡ Use ¡of ¡Technology ¡ Does ¡it ¡work? ¡ Use ¡of ¡Technology ¡ Microso6 ¡Research ¡

Build ¡Prototypes ¡ Understand ¡ ¡ Current ¡Behavior ¡and ¡ User ¡Needs ¡ Build ¡Technology/ Prototype ¡ Does ¡it ¡work? ¡ Use ¡of ¡Technology ¡ Microso6 ¡Research ¡

Main ¡Findings ¡ Simplicity ¡and ¡Crea=vity ¡ – People ¡have ¡their ¡own ¡rou=ne ¡ – People ¡need ¡‘simple’ ¡in ¡the ¡home ¡ Mobility ¡ – Rarely ¡are ¡people ¡at ¡the ¡calendar ¡ Coordina=on ¡ – Done ¡through ¡conversa=on ¡not ¡calendar ¡ – Calendar ¡provides ¡awareness ¡ “LINC-­‑ing” ¡the ¡Family: ¡Par=cipatory ¡Design ¡of ¡an ¡Inkable ¡Family ¡Calendar, ¡CHI ¡2006 ¡ Microso6 ¡Research ¡

Build ¡Digital ¡Prototype ¡ Understand ¡ ¡ Current ¡Behavior ¡and ¡ User ¡Needs ¡ Build ¡Technology/ Prototype ¡ Does ¡it ¡work? ¡ Use ¡of ¡Technology ¡ Microso6 ¡Research ¡

Does ¡it ¡work? ¡ Understand ¡ ¡ Current ¡Behavior ¡and ¡ User ¡Needs ¡ Build ¡Technology/ Prototype ¡ Does ¡it ¡work? ¡ Use ¡of ¡Technology ¡ Microso6 ¡Research ¡

Field ¡Study ¡– ¡Four ¡Families ¡ Microso6 ¡Research ¡

Four ¡weeks ¡later ¡ Microso6 ¡Research ¡

Family ¡Calendar ¡Learnings ¡& ¡Impact ¡ ¡ Personaliza=on ¡ Outlook.com ¡calendar ¡charms ¡ Family ¡room ¡on ¡Windows ¡Phone ¡ Microso6 ¡Research ¡

From ¡Applica=ons ¡to ¡Infrastructure ¡ Family ¡Coordina%on ¡ ¡& ¡Connectedness ¡ 2004 ¡-­‑ ¡2010 ¡ LINC ¡ SPARCS ¡ Video ¡Playdate ¡ Use ¡and ¡Sharing ¡of ¡Technology ¡ 2007 ¡-­‑ ¡2011 ¡ Family ¡Accounts ¡ Phone ¡ ¡ Yours, ¡Mine, ¡ Speech@Home ¡ Sharing ¡ Ours ¡ Microso6 ¡Research ¡

Home ¡Automa=on ¡ 2009-­‑Present ¡ PreHeat: ¡Controlling ¡ Home ¡Automa=on ¡ Home ¡Hea=ng ¡with ¡ in ¡the ¡Wild ¡ Occupancy ¡Predic=on ¡ Microso6 ¡Research ¡

¡ f o Ambient ¡Data ¡ ¡ t e n r e t n I ¡ l a i r t s u ¡ d g n n I i h t y r e v E t ¡ e n r e t n I M2M ¡ Internet ¡of ¡Things ¡ Thinking ¡ Smarter ¡ Things ¡ Planet ¡ ¡ t n e g i l e l t n I ¡ s System ¡of ¡ m e t s y S Observa=ons ¡

Internet ¡of ¡Things ¡ Networks ¡of ¡low-­‑cost ¡sensors ¡and ¡actuators ¡for ¡ data ¡collec=on, ¡monitoring, ¡decision ¡making ¡and ¡ process ¡op=miza=on. ¡ ¡ -­‑ ¡McKinsey ¡Global ¡Ins=tute ¡ Microso6 ¡Research ¡

Connected ¡things ¡everywhere ¡ hVp://blogs.cisco.com/news/the-­‑internet-­‑of-­‑things-­‑infographic/ ¡ Microso6 ¡Research ¡

Home ¡Automa=on ¡in ¡the ¡Wild ¡ Understand ¡ ¡ Current ¡Behavior ¡and ¡ User ¡Needs ¡ Camera ¡ Door ¡sensor ¡ Mo=on ¡sensor ¡ Build ¡Technology/ Prototype ¡ Does ¡it ¡work? ¡ Use ¡of ¡Technology ¡ Programmed ¡light ¡ Wall ¡Panels ¡ Phone ¡Access ¡ switches ¡ Microso6 ¡Research ¡

Why ¡automa=on? ¡ Convenience ¡ Peace ¡of ¡mind ¡ Control ¡ “I ¡like ¡just ¡being ¡ “ It ¡allows ¡me ¡to ¡ ¡ “I ¡can ¡track ¡things ¡when ¡ in ¡control” ¡ be ¡lazy ” ¡ I’m ¡not ¡there ¡and ¡know ¡ that…it’s…secure” ¡ Microso6 ¡Research ¡

Home ¡automa=on ¡pain ¡points ¡ Setup ¡ Extensibility ¡ Cost ¡of ¡ Manageability ¡ ownership ¡ Home ¡automa=on ¡in ¡the ¡wild: ¡Challenges ¡and ¡opportuni=es, ¡CHI ¡2011 ¡ Microso6 ¡Research ¡

Exis=ng ¡abstrac=ons ¡for ¡home ¡tech ¡ Network ¡of ¡devices ¡ – Interoperability ¡protocols ¡ Setup ¡and ¡management ¡is ¡s=ll ¡hard ¡ • DLNA, ¡Z-­‑Wave, ¡Speakeasy, ¡… ¡ • Users ¡must ¡manage ¡each ¡device/task ¡ • Open, ¡low-­‑level ¡device ¡access ¡ • Developers ¡must ¡deal ¡directly ¡w/ ¡h/w ¡ Appliance ¡ Remote ¡ Climate ¡ – Monolithic ¡systems ¡ Extensibility ¡is ¡s=ll ¡hard ¡ monitoring ¡ control ¡ • Crestron, ¡Control4, ¡… ¡ • Closed ¡set ¡of ¡tasks ¡ • Fixed ¡tasks ¡over ¡fixed ¡devices ¡ • Closed ¡set ¡of ¡devices ¡ Microso6 ¡Research ¡