lnu.sePublikationer
Ändra sökning
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf
Performance assessment of Apache Spark applications
Linnéuniversitetet, Fakulteten för teknik (FTK), Institutionen för datavetenskap och medieteknik (DM).
2019 (Engelska)Självständigt arbete på grundnivå (kandidatexamen), 180 hpStudentuppsats (Examensarbete)
Abstract [en]

This thesis addresses the challenges of large software and data-intensive systems. We will discuss a Big Data software that consists of quite a bit of Linux configuration, some Scala coding and a set of frameworks that work together to achieve the smooth performance of the system. Moreover, the thesis focuses on the Apache Spark framework and the challenging of measuring the lazy evaluation of the transformation operations of Spark. Investigating the challenges are essential for the performance engineers to increase their ability to study how the system behaves and take decisions in early design iteration. Thus, we made some experiments and measurements to achieve this goal. In addition to that, and after analyzing the result we could create a formula that will be useful for the engineers to predict the performance of the system in production.

Ort, förlag, år, upplaga, sidor
2019. , s. 33
Nyckelord [en]
Big Data, Apache Spark, BigBlu, Lazy evaluation of Spark
Nationell ämneskategori
Datavetenskap (datalogi)
Identifikatorer
URN: urn:nbn:se:lnu:diva-80181OAI: oai:DiVA.org:lnu-80181DiVA, id: diva2:1285270
Ämne / kurs
Datavetenskap
Utbildningsprogram
Programvaruteknik, 180 hp
Presentation
2018-09-21, Växjö, 09:00 (Engelska)
Handledare
Examinatorer
Tillgänglig från: 2019-02-04 Skapad: 2019-02-04 Senast uppdaterad: 2019-02-04Bibliografiskt granskad

Open Access i DiVA

fulltext(1117 kB)39 nedladdningar
Filinformation
Filnamn FULLTEXT01.pdfFilstorlek 1117 kBChecksumma SHA-512
7333b9dfefcadc1e7db3da93e91d40c357dc78c370f64ce37e513977fa332ffd05da2a3ade2c23028fe05c2e12205f48362616b38a395da65ae576ba1f393e0b
Typ fulltextMimetyp application/pdf

Av organisationen
Institutionen för datavetenskap och medieteknik (DM)
Datavetenskap (datalogi)

Sök vidare utanför DiVA

GoogleGoogle Scholar
Totalt: 39 nedladdningar
Antalet nedladdningar är summan av nedladdningar för alla fulltexter. Det kan inkludera t.ex tidigare versioner som nu inte längre är tillgängliga.

urn-nbn

Altmetricpoäng

urn-nbn
Totalt: 320 träffar
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf