haku: @keyword A/B testing / yhteensä: 3
viite: 2 / 3
Tekijä:Kiiski, Kimmo
Työn nimi:Validating mobile application design with data collection and metrics
Mobiilisovellusten suunnitteluratkaisujen vahvistaminen datankeruulla ja metriikoilla
Julkaisutyyppi:Diplomityö
Julkaisuvuosi:2013
Sivut:69      Kieli:   eng
Koulu/Laitos/Osasto:Perustieteiden korkeakoulu
Oppiaine:Käytettävyystutkimus   (T-121)
Valvoja:Nieminen, Marko
Ohjaaja:Nyberg, Otto
OEVS:
Sähköinen arkistokappale on luettavissa Aalto Thesis Databasen kautta.
Ohje

Digitaalisten opinnäytteiden lukeminen Aalto-yliopiston Harald Herlin -oppimiskeskuksen suljetussa verkossa

Oppimiskeskuksen suljetussa verkossa voi lukea sellaisia digitaalisia ja digitoituja opinnäytteitä, joille ei ole saatu julkaisulupaa avoimessa verkossa.

Oppimiskeskuksen yhteystiedot ja aukioloajat: https://learningcentre.aalto.fi/fi/harald-herlin-oppimiskeskus/

Opinnäytteitä voi lukea Oppimiskeskuksen asiakaskoneilla, joita löytyy kaikista kerroksista.

Kirjautuminen asiakaskoneille

  • Aalto-yliopistolaiset kirjautuvat asiakaskoneille Aalto-tunnuksella ja salasanalla.
  • Muut asiakkaat kirjautuvat asiakaskoneille yhteistunnuksilla.

Opinnäytteen avaaminen

  • Asiakaskoneiden työpöydältä löytyy kuvake:

    Aalto Thesis Database

  • Kuvaketta klikkaamalla pääset hakemaan ja avaamaan etsimäsi opinnäytteen Aaltodoc-tietokannasta. Opinnäytetiedosto löytyy klikkaamalla viitetietojen OEV- tai OEVS-kentän linkkiä.

Opinnäytteen lukeminen

  • Opinnäytettä voi lukea asiakaskoneen ruudulta tai sen voi tulostaa paperille.
  • Opinnäytetiedostoa ei voi tallentaa muistitikulle tai lähettää sähköpostilla.
  • Opinnäytetiedoston sisältöä ei voi kopioida.
  • Opinnäytetiedostoa ei voi muokata.

Opinnäytteen tulostus

  • Opinnäytteen voi tulostaa itselleen henkilökohtaiseen opiskelu- ja tutkimuskäyttöön.
  • Aalto-yliopiston opiskelijat ja henkilökunta voivat tulostaa mustavalkotulosteita Oppimiskeskuksen SecurePrint-laitteille, kun tietokoneelle kirjaudutaan omilla Aalto-tunnuksilla. Väritulostus on mahdollista asiakaspalvelupisteen tulostimelle u90203-psc3. Väritulostaminen on maksullista Aalto-yliopiston opiskelijoille ja henkilökunnalle.
  • Ulkopuoliset asiakkaat voivat tulostaa mustavalko- ja väritulosteita Oppimiskeskuksen asiakaspalvelupisteen tulostimelle u90203-psc3. Tulostaminen on maksullista.
Sijainti:P1 Ark Aalto     | Arkisto
Avainsanat:metrics
remote evaluation
remote instrumentation
A/B testing
user adoption
user loyalty
statistical analysis
metriikat
etäarviointi
etämittaus
A/B -testaus
tilastollinen analyysi
Tiivistelmä (fin): Tässä työssä tutkitaan, kuinka ohjelmistokehittäjät voivat mitata mobiilisovelluksen käyttöä ja todeta mittausten avulla, ovatko heidän suunnitteluratkaisunsa onnistuneet parantamaan tuotteen arvoa.
Työssä keskitytään iPadille julkaistuun sarjakuvanlukusovellukseen nimeltä Comicked, jonka on kehittänyt startup-yritys Witchcraft Labs.
Yritys pyrkii kehittämään uudenlaisen sarjakuvien lukuja julkaisualustan tablet-laitteille.

Tässä työssä esitellään empiirinen lähestymistapa, joka sopii niukkavaraiselle startup-yritykselle, ja jonka keskeisessä osassa ovat sovelluksen laatua kuvaavat metriikat.
Sovelluksen käyttöä mitataan oikeassa tuotantoympäristössä oikeilta loppukäyttäjiltä.
Tämä edellyttää, että sovellus kykenee keräämään käyttödataa ja lähettämään sitä verkon yli analysoitavaksi.
Jotta mittaustuloksista voidaan tehdä johtopäätöksiä, kehittäjien tulee suorittaa A/B-testausta ja varmistaa tulosten pätevyys tilastollisella analyysilla.

Työssä todettiin, että yritys kykenee luotettavasti vahvistamaan suunnitteluratkaisujaan hyödyntämällä asianmukaisia metriikkoja, etämittausta, A/B-testausta, tilastollista analyysia sekä sopivia työkaluja tilastojen seuraamiseen.
Tämä edellyttää kuitenkin, että ohjelmistokehittäjät ymmärtävät näiden menetelmien rajoitukset eivätkä käytä sitä ainoana tapana kerätä tietoa asiakkaistaan.
Työssä esitellyt menetelmät soveltuvat päätösten vahvistamiseen, mutta ei niiden keksimiseen.
Tiivistelmä (eng): This thesis discusses how software developers can measure the use of a mobile application and validate whether or not their design decisions added value to the software.
Our subject is a comic reading application Comicked, currently available for the iPad and developed by a start-up called Witchcraft Labs.
The company aims to create a new way of reading and publishing comics on tablets.

In this thesis, we present an empirical approach for validating design decisions by monitoring metrics, suitable for the start-up with scarce resources.
Application usage is measured from the actual end-users from the real environment.
This kind of evaluation is done remotely, and therefore we need to instrument the application in a way that data can be collected on the client-side and then sent over the Internet to evaluators for analysis.
By analysing remotely collected user events, we can estimate values for different kinds of metrics that describe the quality of the application.
In case of Comicked, we found that the most interesting metrics describe user adoption, user loyalty, and usage rates of application features.
However, we also need methods that allow us to compare the metrics trustworthy.

In this thesis, we discuss A/B testing and statistical analysis, which evaluators can use to gain confidence in their measurements.
We found that the developers can reliably validate their design decisions by using a combination of the metrics, remote instrumentation, A/B testing, statistical analysis and proper monitoring tools.
However, they must understand the limits of these methods and not use them as the only methods of collecting information about their customers.
The approach is meant for validating design decisions and not for discovering them.
ED:2013-09-27
INSSI tietueen numero: 47267
+ lisää koriin
INSSI