Bedrifter tilbyr tjenester for å knuse rå data

A håndfull selskaper og et åpen kildekodeutviklingsprosjekt prøver å sørge for at det ikke skjer som amerikanske president Barack Obama presser for åpen regjering i de tidlige administrasjonsdagene.

Forretningsmodellene er forskjellige, men noen selskaper bruker Rådataene som er utgitt på Data.gov og andre steder for å demonstrere kraften i deres data-publisering og nummerbruddstjenester.

Utgivelsen av alle disse dataene er et godt trekk, men mye av det er i et råformat, noe som gjør Det er vanskelig å presentere det på en måte som folk kan forstå, sier Kevin Merritt, administrerende direktør og grunnlegger av Socrata, et toårig selskap med fokus på å hjelpe myndigheter og andre brukere av dataene å omorganisere og publisere det på nettet.

Socrata kaller sin ser vice om å omorganisere dataene til enkle å lese interaktive diagrammer og grafer "samfunnsdataoppdagelse".

"Dataene er verdifulle, men de sosiale dataene er også verdifulle," sa Merritt, en tidligere Microsoft-direktør. "Det er en ting å sette dataene på nettet, men det er en annen ting å faktisk få noen sosial tilbakemelding loop."

På Data.gov alene var det nesten 400 rå datasett tilgjengelig fra onsdag morgen.

Det er en database over personer, rapportert etter land og region, tildelt asyl i USA mellom 1998 og 2008; Det er data om giftige kjemikalier utgitt i Guam i 2005; Det er en database med tornadoer, store hagl og skadelige vindrapporter fra 1950 til 2006; Det er data om geokjemi av vannprøver i USA; og det er en database med kobbermeltere rundt om i verden.

Det finnes også data om patentsøknader, dødsulykker på arbeidsplassen, føderale IT-utgifter og flyttende fugleflyver. Det er ytterligere 109.000 geografiske datasett.

Vivek Kundra, føderal CIO, ble spurt på et nylig US Federal Communications Commission-forum om Obama-administrasjonens filosofi om utgivelse av data. "Vi vet egentlig ikke hvilke datafeedinger som skal føre til bedre analyse," sa han. "Det vi gjør er, vi prøver å frigjøre så mye data som mulig. Som et resultat av det, finner vi mye innovasjon som skjer der ute."

Da dataene er utgitt, er mange amerikanske innbyggere Spotting trender som regjeringsarbeidere ikke hadde sett før, la han til. For eksempel, basert på data som flyselskapsflyvninger vanligvis er sent på, begynner flyger å unngå fly fra enkelte flyselskaper på bestemte tider av dagen, sa han.

Socrata tar sikte på sine produkter hos myndigheter, samt journalister, forskere og andre mennesker som vil gi mening om de rå dataene. Den tilbyr en håndfull produkter, inkludert et gratis tilbud på tilbudsnivå som gjør at noen kan være vertskap for data på Socrata.com og et vertsbasert datasite for store organisasjoner. Socrata kan hjelpe myndigheter til å kutte kostnader for å lagre og levere data, sier Merritt.

Socrata reformaterer data fra en rekke formater og lar brukerne dele dataene på Twitter, Digg, Facebook og andre nettsteder. Selskapet driver fra en filosofi at data er ment å bli delt, sier Merritt.

"Data blir mer verdifullt da det forplanter seg fra sin kilde," sa han. "Teorien er jo jo lenger den kommer vekk fra kilden, jo flere har brukt det, og derfor må dataene i seg selv være mer verdifulle."

Andre selskaper, inkludert iCharts og Visual I / O, bruker regjeringens data som fortsetter å bli frigjort for å demonstrere kraften i deres visuelle analyser eller kartutgivelsesprodukter.

I tillegg utvikler Sunlight Labs, startet av Sunlight Foundation, utvikling av åpen kildekode programvare som benytter seg av regjeringsdata, og oppfordrer andre utviklere til å gjøre det samme. I år har Sunlight Labs arrangert to konkurranser for å oppmuntre applikasjonsutvikling basert på regjeringsdata, og det har fått mer enn 90 innleveringer.

En del av grunnen til at Sunlight Foundation startet Sunlight Labs, var å hjelpe tradisjonelle og statslige journalister med undersøkende rapportering, sa Clay Johnson, direktør for Sunlight Labs.

"Når Obama-administrasjonen begynner å frigjøre flere data, er det ikke nok fingrene på tastaturer her i Sunlight Labs for å håndtere alt dette, sier Johnson. "Har Obama-administrasjonen lyktes med å gjøre flere regjeringsdata tilgjengelige? Du snakker til fyren med den mest uutslettelige tørsten for det, som aldri vil si at de lykkes."

ICharts fokuserer ikke bare på regjeringen data, men arbeider for å hjelpe utgivere til websiden presentere informasjon i et søkbart, lett å fordøye format, sa Seymour Duncker, iCharts grunnlegger og administrerende direktør. "Det er en enorm overflod av åpne data, for eksempel produsert gjennom regjeringen og gjennom universiteter," sa han. Det er en mulighet til å gjøre dataene tilgjengelige for alle, la han til.

Obamas push for offentlig gjennomsiktighet gir iCharts mange nye rådata til å jobbe med, sa han. "Vi ser at å gi de rå dataene ikke er tilstrekkelig," tilføyde Duncker. "Du må oppgi kontekst. Jeg ser en ny verdikjede som dukker opp her."

For eksempel sporer en av iCharts utpekte diagrammer på forsiden det amerikanske bruttonasjonalproduktet fra 1948 til 2009. I år, som forventes I en lavkonjunktur er BNP betydelig.

Visual I / O kaller sine produkter visuell analyse programvare. Brukere kan lage interaktive diagrammer og grafer og dele dem med andre ved hjelp av Visual I / Os nettbaserte verktøy, sier Angela Shen-Hsieh, Visual I / O-president og CEO. Brukere av diagrammene kan med noen få klikk opprette forskjellige visninger basert på forskjellige parametere.

"Når du ser på Data.gov datasettene, blir de interessante når du mash dem sammen," Shen -Hsieh sa. Dataene blir mer nyttige når brukere overlegger datasett som kroniske sykdommer med geografisk informasjon, la hun til.

To IT-analytikere sa at de ser en økende trend med selskaper som iCharts og Visual i / o ved hjelp av regjeringsdata for å demonstrere sine produkter og tjenester. Men både Shawn McCarthy, en regjeringsleverandøranalytiker med IDC og David Curle, ledet analytiker med Outsell, spurte om et selskap kunne bygge en forretningsmodell helt på å gjenopprette regjeringsdata.

Det synes å være begrensede salgsmuligheter utenfor salg De repurposed dataene tilbake til myndigheter, og med dataene tilgjengelig for alle, vil potensialet for konkurranse være flott, sa Curle.

Mange offentlige interessegrupper lager allerede diagrammer og grafer med regjeringsdata, la McCarthy til.

"Det jeg har funnet er at de fleste dataene jeg har sett trenger ytterligere manipulasjon for å gjøre det virkelig verdifullt," sa han. "Enhver som tar tak i dataene og gjør noe med det, er mest sannsynlig å tilføre verdi til det."