search query: @keyword informaatioteoria / total: 4
reference: 4 / 4
« previous | next »
Author:Tatti, Nikolaj
Title:Dissimilarity measures between binary data sets
Binääridatajoukkojen eroavaisuusmitat
Publication type:Master's thesis
Publication year:2004
Pages:73      Language:   eng
Department/School:Tietotekniikan osasto
Main subject:Informaatiotekniikka   (T-122)
Supervisor:Mannila, Heikki
Instructor:Mannila, Heikki
OEVS:
Electronic archive copy is available via Aalto Thesis Database.
Instructions

Reading digital theses in the closed network of the Aalto University Harald Herlin Learning Centre

In the closed network of Learning Centre you can read digital and digitized theses not available in the open network.

The Learning Centre contact details and opening hours: https://learningcentre.aalto.fi/en/harald-herlin-learning-centre/

You can read theses on the Learning Centre customer computers, which are available on all floors.

Logging on to the customer computers

  • Aalto University staff members log on to the customer computer using the Aalto username and password.
  • Other customers log on using a shared username and password.

Opening a thesis

  • On the desktop of the customer computers, you will find an icon titled:

    Aalto Thesis Database

  • Click on the icon to search for and open the thesis you are looking for from Aaltodoc database. You can find the thesis file by clicking the link on the OEV or OEVS field.

Reading the thesis

  • You can either print the thesis or read it on the customer computer screen.
  • You cannot save the thesis file on a flash drive or email it.
  • You cannot copy text or images from the file.
  • You cannot edit the file.

Printing the thesis

  • You can print the thesis for your personal study or research use.
  • Aalto University students and staff members may print black-and-white prints on the PrintingPoint devices when using the computer with personal Aalto username and password. Color printing is possible using the printer u90203-psc3, which is located near the customer service. Color printing is subject to a charge to Aalto University students and staff members.
  • Other customers can use the printer u90203-psc3. All printing is subject to a charge to non-University members.
Location:P1 Ark Aalto     | Archive
Keywords:information theory
binary data
itemsets
informaatioteoria
binääridata
kattavat joukot
Abstract (fin):Eroavaisuusmitoilla kahden abstraktin objektin välillä on tärkeä osa tiedonlouhinnassa.
Perinteisesti mitat on määritelty kahden datapisteen välille.
Tässä työssä tutkitaan mittoja kahden binääridatan välillä.
Binääridatalla tarkoitetaan joukkoa, joka koostuu 0-1 vektoreista.
Esimerkiksi tällainen data voisi olla myyntidata siten, että jokainen vektori edustaisi yhtä ostostapahtumaa.
Jos sellainen myyntidata olisi kerätty eri kuukausina, niin siinä tapauksessa voitaisiin tutkia miten ostoskäyttäytyminen eroaa eri aikoina.

Työssä oletetaan, että binääridata on generoitu jostain tuntemattomasta jakaumasta.
Mitta määritellään epäsuorasti jakaumien kautta.
Estimoidakseen jakauma datasta käytetään hyväksi kattavia joukkoja ja tunnettuja informaatioteoreettisia työkaluja: Estimaatti on jakauma, jolla on korkein entropia ja joka täyttää tietyt kattavien joukkojen asettamat ehdot.
Kahden datajoukon väliseksi mitaksi määritellään näitten datajoukkojen jakaumien estimaattien Kullback-Leibler informaatio.

Suurin ongelma tässä lähestymistavassa on, että kyseinen mitta ei ole yleisessä tapauksessa laskettavissa polynomisessa ajassa.
Työssä tarkastellaan kahta mallia, tarkemmin sanottuna riippumattomuusmallia ja Chow-Liu -puumallia, joita käyttämällä mitta voidaan laskea tehokkaasti.
Yleisempää tapausta varten Kullback-Leibler korvataan toisen asteen estimaatilla.
Työssä esitetään, miten tällainen estimaatti voidaan laskea tehokkaasti.

Testatakseen mittoja työssä käytetään tunnettua datajoukkoa, joka koostuu 20 000 artikkelista, jotka on kerätty 20 eri uutisryhmästä.
Uutisryhmistä muodostetaan bag-of-words -esitykset, joita käytetään mittojen testaamiseen.
Työssä tarkastellaan saatuja tuloksia ja päädytään lopputulokseen, että ne ovat järkeviä.
ED:2004-04-06
INSSI record number: 25115
+ add basket
« previous | next »
INSSI