Sitran trendilista 2013-2014

Sitra listasi trendejä vuosille 2013-2014 ja yksi mainituista on "Data vaurauden ja vallan lähteenä".

Esittelyssä MapR (Hadoop-jakelu)

Tässä kattava esitys MapR:n Hadoop-jakelun arkkitehtuuristä:

Cloudera ja HP

HP lisää Hadoop-tukeaan

HP uutisoi eilen, että sen Hadoop-tuki paranee entisestään:

With the new expansion kits, you can seamlessly expand the number of data nodes in the cluster and take advantage of the same level of solution integration you experienced with the AppSystem. Expansion kits come pre-loaded with RHEL, Cloudera CDH, and Insight CMU - just like the AppSystem - to plug right in to your existing environment and expand your data processing and capacity. Expansion kits are designed to simplify ordering, and come in half-and full-rack configurations.

Big data -tietoisku julkishallinnolle 2.10.2013

Tänään pidettiin Ivorion järjestämä "Big data -tietoisku" julkishallinnolle (lisää aiheesta täällä). Tässä tilaisuuden esitysmateriaali:

Spotify kasvattaa dataansa

Spotify, joka jo entuudestaan kokoaa massiivisia datamääriä palvelunsa toiminnasta ja käyttäjistä, kasvaa edelleen. Esittelemällä Follow-painikkeen, Spotify pääsee käsiksi sen käyttöönottavien verkkosivujen käyttötietoihin samalla tavoin kuin Facebook, Google+ ja monet muut. Spotifyn tulokulma on tietenkin musiikin kuuntelun, tottumusten ja suositusten jakaminen jälleen uudella tavalla, mutta nähtäväksi jää miten samalla saavutettavia lisätietoja jatkossa keksitään hyödyntää.

Ulla Kruhse-Lehtonen vuoden 2013 tietojohtaja

Tietoasiantuntijat ry valitsi Lehtosen vuoden tietojohtajaksi

Ulla Kruhse-Lehtonen sai Tietoasiantuntijat ry:n vuoden 2013 tietojohtaja -tunnustuksen. Kruhse-Lehtonen vetää Sanoman Big data -hanketta.

Sanoma haluaa entistä tehokkaammin hyödyntää käytettävissään olevaa dataa parhaan mahdollisen asiakas- ja kuluttajaymmärryksen kehittämiseksi sekä suunnittelu- ja päätöksentekoprosessien tueksi. Tiedon, datan ja analytiikan hyödyntäminen luo liiketoiminnalle aivan uudenlaisia kasvun edellytyksiä ja kilpailuetua. Olen erittäin iloinen tästä tunnustuksesta.

Big data ja pilvipalvelut Casinolla

Pilvi & Big Data – strategian valttikortit?

Tänään pidettiin "Pilvi & Big Data – strategian valttikortit?" -nimellä aamupäivän mittainen tilaisuus Helsingin Casinolla, järjestäjinä Tietoviikko ja Nordcloud. Tässä Ivorion esitysmateriaali:

Monsanto: miljardin dollarin datakauppa

Yhdysvaltalainen maatalousjätti Monsanto on ostanut ilmastontarkkailun big datan varaan rakennetun Climate Corporationin 930 miljoonalla dollarilla. Osa lähteistä lisää summaan vielä kaupan vahvistamisen jälkeisiä kustannuksia, korottaen kokonaishinnan yli miljardiin. Monsanton oman tiedotteen aiheesta voit lukea tästä.

A-studio: Maailmaa mullistavat teknologiat

Tulevaisuuden teknologiat

A-studiossa käsiteltiin tulevaisuuden teknologioita ja laitettiin niitä myös järjestykseen. Listan ykkönen on vähemmän yllättävästi big data ja avoin data.

Suomen sata uutta mahdollisuutta

Mistä talouskasvuun vauhtia?

Talouskasvu ja hyvinvoinnin lisääntymisen välillä on positiivinen korrelaatio. Avainsana on työ ja sen tuottavuus. Tuottavuutta kasvattavat innovaatiot. Tästä aihepiiristä julkistettiin "Suomen sata uutta mahdollisuutta - radikaalit teknologiset ratkaisut" -julkaisu (Eduskunnan tulevaisuusvaliokunta). Yhtenä mahdollisena kasvualueena nähdään avoin data ja big data:

Pimeän datan nousu

The Rise of Dark Data

SAP on tehnyt videopätkän, jossa kuvitteellisen elokuvan trailerin keinoin havainnollistetaan meneillään olevaa murrosta:

Big data ohitti Cloud computing -käsitteen Google-hauissa

Big data ohitti viimein pilvipalvelut Google Trendsin kuvaajassa, jossa näytetään eri hakujen suhteellista suosiota.

Big data ja pilvipalvelut á la HP

HP HAVEn pilvipalveluna

HP julkisti äskettäin oman pilvipalvelunsa big data -markkinoille: HP HAVEn pilvipalveluna.

new cloud-based analytics as a service built on HP's HAVEn Big Data analytics platform, helping clients solve business problems and create new revenue opportunities. By leveraging HP HAVEn, clients can more effectively analyze and derive value from their information, such as increase sales with targeted client offerings, improve supply chain performance, detect fraud or discover security risks.

Big datasta Comptelin blogissa

Comtelin blogissa Ulla Koivukoski ja Malla Poikela kirjoittavat big dastasta otsikolla "Big Data häivyttää rajan liiketoiminnan ja teknologian väliltä".

Big data teemana monessa tilaisuudessa syksyllä

Syksyllä puhutaan big datasta monessa yhteydessä, tässä muutama kuukauden kuluessa toteutuvista:

Big data on liiketoiminnan murros, jonka mahdollistaa teknologia

Pihvi on liiketoiminta

Big datassa ei ole kyse teknologiasta. Liian usein huomio kiinnittyy yksityiskohtiin. Appliancet ovat toki kalliita ja kiinnostavia, mutta niiden arvo on välineellinen. Sama pätee Hadoopiin ja big data -nimikkeellä myytäviin pilvipalveluihin. Ne ovat hienoja, innovatiivisia ja usein kalliitakin. Teknologiasta puhuminen on toki olennainen osa ilmiötä ja konkreettista osaamista vaaditaan, mutta ydin on muualla. Meneillään on ennen kaikkea liiketoimintaan ja yhteiskuntaan vaikuttava murros, jossa teknologialla on ainoastaan mahdollistava rooli.

Terveysdatasta kaikki irti

Diabetes maksaa yhteiskunnalle 2.5 mrd € vuodessa

Terveydenhuolto on yksi keskeisistä julkishallinnon tehtävistä Suomessa ja rahasummatkin ovat melkoisia. Pelkästään diabetekseen menee vuositasolla kolmatta miljardia. Tiedon vallankumous on avaamassa uusia mahdollisuuksia myös terveydenhuollossa:

Tietoyhteiskuntasektorin huippuseminaari

Tänään pidettiin LVM:n järjestämä Tietoyhteiskuntasektorin huippuseminaari Helsingissä. Ivorion puheenvuoro käsitteli yhä akuutimmaksi muuttuvaa osaajapulaa. Tässä blogikirjoitus Ivorion blogissa. Alla esityksen materiaali:

Big data in education

Tuolla nimikkeellä pidetään keskustelutilaisuus Yhdysvaltain suurlähetystössä:

Summary of themes

BYOH: Bring Your Own Hadoop

Hadoop ei ole hopealuoti

Aloitetaan tuolla: Hadoop ei ole ainoa eikä mitenkään maaginenkaan ratkaisu big data -ongelmaan eli nopeasti kasvavien, suureksi kasaantuvien ja sisällöltään sekä muodoltaan vaihetelevian datamassojen haasteeseen. Tarkastelemalla kulunutta viittä vuotta on kuitenkin turvallista ennustaa, että Hadoop ei ole häviämässä mihinkään ja että yhä useammasta organisaatiosta se pian löytyy. Jälleen eilen osui kohdalle yksi uusi suomalainen peluri, jolla Hadoop on jo pilotoinnissa ja käyttötarkoituksia mietitään kuumeisesti.

Hyvä raportti big datasta

William Blair & Companyltä tuli äskettäin ulos raportti Big Data: From Hype to Applicability, jossa luodaan kokonaisvaltainen katsaus markkinoihin ja keskeisiin toimijoihin ja teknologioihin. Hadoopillekin povataan hyvää eli siirtymää datan tallennuspaikasta sen hyödyntämisen alustaksi.

We believe that there will be a transformation from using Hadoop as a storage medium to use-cases involving data manipulation and transformation, and eventually analyzing the data.

Big data on perustavanlaatuinen muutos liiketoiminnassa

"Fundamental shift" on käsite, jota käytetään Forbesin blogissa:

But what you really need to know about big data is this: It represents a fundamental shift in how we do things. In effect, big data opens the door to a Bayesian approach to strategy where we no longer try to be “right” based on controlled research and small samples, but rather become less wrong over time as real world information floods in.

USA:n suoramarkkinointiliitto big datasta

Direct Marketing Association (DMA) eli suoramarkkinointiliitto kertoo tuoreessa selvityksessään datavetoisen markkinoinnin voittokulusta vuonna 2012:

The report estimates that in 2012, the data-driven marketing economy added $156 billion in revenue to the U.S. economy and fueled more than 675,000 jobs.

WatsonPaths (IBM)

Watson voitti Jeopardy-visailun taannoin, tässä jatkoa tarinaan:

Datan avulla sydänkohtaus voidaan ennustaa

Tietenkin. Sydän harvemmin pysähtelee syyttä. Tästä aiheesta on nyt uutisoitu useassakin lähteessä ja syy on Yhdysvaltain terveysviraston antama parin miljoonan dollarin rahoitus potilastietojen big data -tutkimukseen. Prediktiivinen lääketiede tekee tuloaan vauhdilla.

Hadoop versio 2

Hadoopin uusi versio

Hadoop versio 2 ei ole enää beta-vaiheessa eli versio 2.2.0 julkistettiin tällä viikolla. Hadoop-koulutusten kysyntä on kasvanut vauhdilla ja yhä useammassa yrityksessä halutaan kuulla, mitä seuraavien vuosien aikana on odotettavissa ja mihin Hadoop kykenee. Hadoopiin liittyy paljon mystifiointia ja yliodotuksia, mutta samoin myös aliarviointia ja väärinymmärrystä. Mielikuva Hadoopista halpana datan säilytyspaikkana, jolla ei juuri muuta käyttöä ole, on yhä kauempana todellisuudesta.

Big data pääomasijoittajien näkökulmasta

Pelifirmojen menestyksen on huomannut varmasti jo jokainen ja jos vertaa tämän vuoden Nokia- ja Supercell -kauppoja, niin on helppo huomanta, miten suuri potentiaali innovatiiviseen dataintensiiviseen liiketoimintaan liittyy. Pääomasijoittajien näkökulmasta big data tarjoaa kiinnostavat markkinat. Tästä puhutaan mm. Ivorion järjestämässä "Big data sijoittajille" -tietoiskussa.

Liikennedatan hyödyntämistä käytännössä

CGI avaa tämän päivän Talouselämä-lehden kumppaniblogissaan käytännön referenssiä Suomessa toteutetusta big data -hankkeesta. Linja-autoliikenteen optimoimiseksi on kerätty sensorista dataa, tunnistettu ongelmakohtia ja kehitetty toimintaa jatkuvan palautteen kautta. Saavutukset ovat olleet positiivisia monella mittarilla: asiakastyytyväisyydessä, käyttökustannuksissa ja ekologisuudessa.

Hitachi Information Forum, aiheena mm. big data

Hitachi Information Forum 27.11.2013

Hitachi järjestää Hitachi Information Forum -tilaisuuden 27.11.2013 klo 13:30-17:00, jossa aiheena mm. big data.

lmoittautuminen

SAS ja Hortonworks - yhteistyö syvenee

Hortonworks ja SAS strategisia partnereita

Hortonworks ilmoitti syventävänsä yhteistyötä SAS:n kanssa:

Today, we are pleased to announce our strategic alliance between Hortonworks and SAS. Through this alliance we are committing to expand the integration between the SAS business analytics and data management capabilities and the Hortonworks Data Platform (HDP).

Lue lisää

Arbitron Mobile hakee Hadoop-osaajaa

Arbitron Mobile Espoosta hakee mm. Hadoop-osaamista:

The employees are very tech oriented, so you won't be spending your time in solving ID-10T errors, but instead, you will need to install new server hardware and work with open source software, such as Apache Hadoop.

Ilmoitus täällä

Opera Solutions sai rahoitusta 84 milj.$

Opera Solutions LLC sai ensimmäisen rahoituskierroksensa pääomasijoittajilta: 84 milj.$. Tämän perusteella yrityksen markkina-arvo on noin puoli miljardin (dollareissa).

Opera builds big-data computer systems that can suck in billions of pieces of data at once—from home and auto prices to real-time information on brokerage accounts or supply chains. It then analyzes that data to pull out "signals" or insights about how consumers, markets and systems are behaving.

Big data -osaajista pulaa Iso-Britanniassa(kin)

Jälleen yksi selvitys, joka laulaa tuttua virttä: big data -osaajia ei ole riittävästi. Tällä kertaa selvitys tehtiin Iso-Britanniassa.

The growing need for IT staff with the ability to analyse and interpret big data was widely reported.

Juttu selvityksestä täällä

Doug Cutting Hadoopista (haastattelu)

Hadoopista puhutaan nyt paljon, kun versio 2 on tullut ulos beta-kaapista. Projektin alkuperäinen vetäjä Cutting saa myös jakaa kommenttejaan tiuhaan (työskentelee nykyään Clouderalla, tunnetuimmalla ja suurimmalla puhtaasti Hadoopiin keskittyneistä uudehkoista yrityksistä, ns. Hadoop-jakelijoista).

Big data rahoitusmarkkinoilla

Tuore selvitys "Global Big Data Market in the Financial Services Sector 2012-2016" tarkastelee big data -markkinoita lähitulevaiuudessa rahoitusalan palveluiden (financial services) näkökulmasta. Vuotuiseksi kasvuprosentiksi arvioidaan 57 %. Osaajapula tulee jälleen mainituksi jarruna.

Hortonworks, SAS ja Teradata

Hortonworks ilmoitti tänään tiivistävänsä yhteistyötä SAS:n ja Teradatan kanssa.

Today, we announced “Analytics Advantage with Hadoop”, a new program from SAS, Teradata and Hortonworks, which allows organizations to glean insights from all types of data and utilize analytic results to improve performance.

Blogikirjoitus aiheesta

SMAC kasvaa huimaa vauhtia

Tavoitteena 300 mrd $

Intialainen NASSCOM tavoittelee merkittävää kasvua lähivuosina ja ennustaa sen tulevan pääasiassa sosiaalisesta mediasta, mobiilista internetistä, pilvipalveluista ja big datasta.

Big data Tulevaisuusvaliokunnan nelitasomallin ykkösenä

Tulevaisuusvaliokunnan selvityksessä listataan "Suomen sata uutta mahdollisuutta" ja puhutaan nimenomaan radikaaleista teknologisista ratkaisuista. Pisteytettynä sadan kohdan listan ykkössijalta löytyvät "Big data ja avoin data" (raportin s. 181).

Hadoop-osaajaa haetaan: Iceberg Analytics

Iceberg Analytics -projekti hakee Hadoop-osaajaa. Hadoop-jakeluista käyttöön valittu Cloudera eli CDH4:n tunteminen suotavaa.

The ideal candidate has technical skills in data management/programming and a vision for the future of big data and visualization. We are ultimately a financial information company combining quantitative high finance with advanced big data visialization concepts. Iceberg project is a start up to be incorporated in the very near future.

The technical skills we are looking for include:

BBC investoi analytiikkaan

BBC hakee partnereita jopa 20m€ kokoluokan hankkeeseen tulevaisuuden analytiikkaratkaisuja varten. Ottaen huomioon organisaation datavirrat, on selvää, että kumppaniehdokkaat löytyvät big data -ohjelmistotaloista. Kumppanuuden päärooli annetaan yhdelle toimittajalle, joka vastaa alustasta. Lähes puolet kokonaisinvestoinnista hajautuu kuitenkin useammalle pienemmälle toimijalle, joiden tehtäväksi jää tuon alustan päälle toteutettavat käytännön analytiikkaratkaisut.

Tieto uskoo big dataan

Tieto-konsernin kolmannen vuosineljänneksen osavuosikatsauksessa korostuu big datan kasvava rooli heidän palveluvalikoimassaan. Jo nyt vahvan tuote- ja palveluvalikoiman ennustetaan kasvavan moninkertaiseksi lähivuosina.

Työn loppumisesta ja big datasta Tekesin blogissa

Tuomo Alasoini kirjoittaa työn loppumiseen liittyvästä keskustelusta Tekesin blogissa otsikolla Katoavatko työpaikat:

Isotieto.fi

EMC on avannut oman bloginsa big dataan liittyen: Isotieto.fi. Ensimmäiset kirjoitukset jäivät huomaamatta, mutta tänään EMC:n tilaisuudessa Dipolissa kerrottiin myös tästä. Keskustelu aiheen ympärillä siis kiihtyy entisestään.

Ylin johto tiedon vallankumouksen tulppana?

"Iso pomo estää analytiikan hyödyntämistä" on otsikkona CIO:n tämän päivän jutussa, jossa siteerataan McAfeen seminaarissa esitettyä väitettä siitä, että ylin johto on esteena analytiikan hyödyntämisen tehokkaalle etenemiselle. Joskus ehkä niin ja joskus taas varmasti päinvastoin: innostus ja näkemyksellisyys tulee ylimmältä johdolta. Joissain ilmiöissä taas jarrua olisi kaivattu aiemmin ja enemmän...

Hadoopin uudesta versiosta sanottua

Hadoop-jakelut siirtyvät käyttämään versiota 2

Hadoop kehittyy vauhdilla. Ekosysteemi laajenee ja sisarprojektien määrä kasvaa. Jakelut kypsyvät ja kohta nähtäneen niitä yrityskauppoja. Tässä kolmen puhtaasti Hadoopin varaan liiketoimintansa rakentaneen tuoreita blogipostauksia Hadoopin uudesta versiosta:

Big data vähittäiskaupassa: Tesco

Tesco on yksi tunnetuista esimerkeistä, jotka tulevat usein mainituiksi big datasta puhuttaessa. Varsinkin, jos konteksti on vähittäiskauppa. Tesco kertoo kasvattaneensa yksinkertaisen sensorisen datan hyödyntämisellä liikevoittoaan (ennen veroja) 10 %:lla.

Capgemini Clouderan partneri

Capgemini ilmoitti tällä viikolla partneroituvansa Clouderan kanssa:

For Hadoop to gain widespread adoption in the enterprise, it must become a first class citizen, fitting cleanly into the IT ecosystem and technology environments that already exist.

lehdistötiedote

Cloudera asemoi itseään markkinoilla

Clouderan toimitusjohtaja Tom Reillyn kommentteja Clouderan asemasta suhteessa Hortonworksiin ja MapR:än julkaistiin eilen Gigaom.com -sivustolla. Cloudera pyrkii (tietenkin) vähintään säilyttämään johtoasemansa markkinoilla. Liikevaihdolla, työntekijämäärällä ja pääomasijoittajien rahoituspanostuksella mitattuna se on noista kolmesta tällä hetkellä johtoasemassa. Samoin markkina-arvoarviot Clouderalle ovat mainittuja verrokkeja korkeammat.

Teollinen internet, osa 1

Ilmiöllä monta nimeä

Meneillään olevaa muutosta tarkastellaan eri näkökulmista ja ilmiölle annetaan rinnakkaisia nimityksiä. Teollinen internet viittaa laitteiden (koneiden), analytiikan ja ihmisten yhdistämiseen tavalla, joka tehostaa automaatiota, parantaa ennustusten osumatarkkuutta ja vie analytiikan tulokset käytäntöön mahdollisimman nopeasti.

EMC datatieteilijöistä

EMC julkaisi infograafin, jossa kuvataan, mitä datatieteilijältä vaaditaan, mikä jarruttaa tiedon vallankumousta ja muuta. Keskeisiksi jarruiksi tunnistettiin seuraavat kaksi:

  1. Ei ole osaamista (Employees don't have the right skills or training, 32 %)
  2. Ei ole tahtotilaa (Lack of budget or resources, 32 %)

Kaikki lähtee strategiasta, tässäkin.

Sivut