Trots den senaste revolutionen i sociala nätverk, är vi fortfarande en mycket privat nation. Vi njuter av den lagliga rätten att inte få regeringen att näsa sin näsa i våra liv utan att säga en domare, och absolut inte utan goda skäl.

Från och med 2015 planerar den brittiska regeringen att lyssna på alla våra online liv. Det är chocknyheterna som kommer från Whitehall, eftersom koalitionen publicerar planer för att tillåta säkerhetstjänsten att övervaka detaljer om vår privata elektroniska kommunikation och att mina den resulterande massan av data för dolda anslutningar som tydligen hjälper dem att identifiera "brottslingar och terrorister".

Denna underrättelse kommer att överföras till Storbritanniens skuggiga underrättelsetjänster, polisen och en lista över andra, som ännu inte avslöjats, berörda parter.

Det finns bekymmer, som man kan förvänta sig av tryckgrupper: "Den automatiska inspelningen och spårningen av allt som görs online av någon av nästan alla våra kommunikationer och mycket av våra personliga liv - bara om det kan komma till nytta för myndigheterna senare - är bortom drömmarna av en tidigare totalitär regim, och bortom nuvarande möjligheter till även de mest förtryckande staterna, säger Guy Herbert of NO2ID.

Hans är inte en ensam röst; motstånd från industrin och även inom regeringen växer. Har vi rätt att motsätta sig regeringens planer? För att få reda på, undersökte vi varför ett sådant drag tycks behövas, hur terrorister för närvarande kommunicerar och hur säkerhetstjänsterna planerar att skörda och använda våra data i den här exklusiva rapporten.

Smutsiga ord

Vid tiden för det senaste allmänna valet 2010 försökte New Labor tvinga oss att alla köpa dyra ID-kort. Det hade också tillfälligt lagat en mer kontroversiell plan för att övervaka all vår elektroniska kommunikation efter stämningsuppror från pressgrupper, liksom TORERNAS OCH FRIHETER.

Det verkade länge som att koalitionsregeringen som kom fram efter det nya arbetets efterföljande nederlag var fast vid sidan av privatlivet. Sid 11 av koalitionsavtalet i maj 2010 innehåller ett uttalande som lovar att "sluta lagra internet och e-postposter utan god anledning". En vecka senare sade vice premiärminister Nick Clegg i ett tal som "Vi kommer inte hålla ditt internet och e-post poster när det bara finns ingen anledning att göra det."

Tydligen lika bra som deras ord var en av de första handlingarna i den nya regeringen att skrapa ID-kort, men enligt Open Rights Group utarbetade samma regering planer på att återuppliva Arbetsmarknadsövervakningssystemet.

Så långt tillbaka som juli 2010, bara två månader efter koalitionsavtalet och Cleggs tal, uppstod den första inklingningen av planen i ett dunkelt hemkontordiskussionsdokument (PDF-filen kan ses här.). Inte bara det, men begravd i regeringens strategiska försvars- och säkerhetsgranskning av oktober 2010 är detta uttalande: "Vi kommer att införa ett program för att bevara säkerhets-, efterlysnings- och brottsbekämpande myndigheters förmåga att skaffa kommunikationsdata och avlyssna kommunikation inom lämplig rättslig ram. "

Detta är utvecklingsprogrammet för kommunikationskapacitet (CCDP), och det expanderar på den tidigare arbetsregerings regeringens planer på att genomföra mass digital övervakning. Trots detta avslöjar David Cameron fortfarande anspråk på en snooping-databas under premiärministerns frågor den 27 oktober 2010: "Vi överväger inte en centraldatabas för att lagra all kommunikationsinformation," sade han, "och vi ska arbeta med Informationen Kommissionärens kontor om allt vi gör i det området. "

Säkerhetsministern James Brokenshire gick också på rekord för att lugna rädslan: "Vi får absolut behovet av lämpliga skyddsåtgärder," sade han, "och för lämpliga skyddsåtgärder införs kring eventuella förändringar som kan komma framåt." Han gick vidare: "Det här är inte den tidigare regeringens plan att skapa någon form av stor stor" Big Brother "-databas. Det är just det som inte är det här."

I april i år krävde Nick Clegg fortfarande total opposition, och sa det i en tv-intervju. "Jag är fullständigt motsatt, helt motsatt, till tanken på regeringar som läser människors e-postmeddelanden på vilja eller att skapa en helt ny centralstatistik," insisterade han. "Poängen är att vi inte gör något av det och jag skulle inte tillåta oss att göra något av det. Jag är helt motsatt som en Liberal Democrat och som någon som tror på människors integritet och medborgerliga friheter."

Men ingen av dessa försäkringar säger den sanna berättelsen om regeringens planer för oss alla.

Koalitionens motstånd

Hints om vad som ligger i butik för oss kommer från siffror som är öppet motsatta programmet inom själva koalitionen. "Varje e-post till dina vänner, varje telefonsamtal till din fru, varje statusuppdatering ditt barn sätter på nätet. Regeringen vill övervaka partiet genom att tvinga internetföretag att överlämna detaljerna till byråkrater på begäran", säger David Davis, konservativ MP för Haltemprice och Howden och tidigare minister för utrikesdepartementet.

Det centrala argumentet för CCDP är naturligtvis att det fortsätter att upptäcka allvarliga hot mot nationen. GCHQ behöver nu skörda data om privat elektronisk kommunikation i stor skala. Lyssnarna i Cheltenham kommer att sikta "vem, vad och var" av varje elektronisk kommunikation och vidarebefordra den destillerade intelligensen till berörda parter inom nätverket av brittiska säkerhetsbyråer för analys av de underliggande hoten.

De data som ska destilleras kommer att innehålla ganska mycket allt som inte behöver en uttrycklig garanti för att läsas, inklusive de webbplatser vi besöker och våra sökhistorier. Inte bara det, men sociala nätverk, som Facebook, LinkedIn och Twitter kan också beställas för att ge information om sina användare.

Det är inte svårt att ta reda på vilken information GCHQ kommer att kunna utvinna från en så detaljerad bild av oss alla, men konsekvenserna och kapaciteten för rättvisa miscarriages är potentiellt enorma om korrekt sunt förnuft inte tillämpas också, enligt David Davis: "Naturligtvis bör regeringarna använda de bästa verktygen till deras förfogande för att ta itu med terrorismen", erkänner han.

"Men vi kan göra detta under det nuvarande systemet. Om de vill se all denna information bör de vara villiga att lägga sitt ärende inför en domare eller domare. Det kommer att tvinga dem att fokusera på de verkliga terroristerna snarare än att göra Storbritannien till en nation av misstänkta. "

Clueless snooping

Hela ideen om CCPD är "clueless", enligt Ross Anderson. Han är professor i säkerhetsingenjör vid University of Cambridges datalaboratorium. Anderson talade i april i år på konferensen Scrambling for Safety 2012 som hölls vid London School of Economics.

Han var inte den enda kritiken av regeringens planer. Sir Chris Fox, ex-chef för polisförbundets förening, talade också vid konferensen och hävdade att CCDP "inte kommer att fånga brottslingar och terrorister på toppnivå". Någon som är smart nog att bilda en organiserad brottsring eller terroristcell kommer helt enkelt hitta andra mer hemliga kommunikationsmetoder, sa han.

Respekterade säkerhetsforskare har också kritiserat CCDP för den uppenbara lättheten med vilken nätkunniga terrorister kunde kringgå det. "Om nationella regeringar och brottsbekämpande organisationer verkligen tror att onlinekriminella och internationella terrorister inte vet hur de ska dölja sina spår på nätet, så har vi ett större problem än vi trodde - att skicka ett krypterat e-postmeddelande med spoofed avsändaradress från en internetkafé är bara lektion en. "

Så säger Rik Ferguson, Trend Micro. Nuvarande EU-lagstiftning innebär att ditt mobilnät redan samlar in omfattande data om dina samtal och texter (men inte deras innehåll). Dessa data lagras i mellan sex månader och två år om polisen eller säkerhetsstyrkorna behöver det för att stödja en övertygelse.

I framtiden kommer detta att ingå i den mängd data som behandlas av CCDP. Det är dock den detalj som säkerhetstjänsten kommer att kunna snoopa på oss som kommer som störst chock.

O2 säger till exempel i sin integritetspolicy som den samlar in: "Telefonnummer och / eller e-postadresser till samtal, texter, MMS, e-postmeddelanden och annan kommunikation som gjorts och mottas av dig och datum, varaktighet, tid och kostnad för sådan kommunikation, din sökning, surfhistorik (inklusive webbplatser du besöker) och platsdata, internet-PC-plats för bredband, adressplats för fakturering, leverans, installation eller som tillhandahålls av enskild telefonplats. " Denna information kan sedan delas med tredje part "där det krävs enligt lag, förordning eller rättsliga förfaranden."

Å andra sidan är Internetleverantörer inte nöjda med regeringens massövervakningsplaner. Många Internetleverantörer samlar bara in grundläggande statistik om nätverket och använder det för att hjälpa dem att planera och hantera tider med högsta efterfrågan. När enskilda användare missbrukar sin bredbandstjänst kan Internetleverantörer identifiera och stryka tillbaka sin trafik och till och med säga upp deras anslutning enligt deras slutanvändaravtal.

För Internetleverantörer verkar det som om CCDP är ett oväntat tillägg till sina nätverk, eftersom det kommer att innebära stora mängder arbete att implementera och underhålla. "Det vi vet, säger Gus Hosein of Privacy International", är att det har varit hemliga briefings till parlamentsmedlemmar avsedda att skrämma dem till överensstämmelse och hemlig information till industrin som ursprungligen utformades för att lugna deras rädsla men faktiskt bara har tjänat för att öka deras upprörande. "

För att förstå hur svårt det är att upptäcka terrorister i ett hav på 60 miljoner människor som entusiastiskt chatterar i cyberspace, är det nödvändigt att förstå något av hur terrorister för närvarande använder internet för att kommunicera.

Jihadi73 dödade dig

Terrorister och seriösa, organiserade brottslingar använder en rad olika kommunikationsmetoder utformade för att undvika fångst. Men de farligaste terroristerna av den typ som utbildats i al Qaida-sponsrade läger vet att myndigheterna redan kan följa och på annat sätt övervaka dem enligt befintliga lagar.

För att fortsätta planera sina onda handlingar måste de hitta nya sätt att skicka information mellan varandra. Spelfilm med massivt multiplayer online rollspel (MMORPG) och First person shooter (FPS) erbjuder unika möjligheter till hemlig kommunikation. Medlemmar av en konspiration kan enkelt köpa något antal videospel och träffas i ett slumpmässigt valt spel för att chatta privat.

Säkerhetsanalytiker hos The Rand Corporation har också noterat en störande utveckling: Multiplayer-videospel själva kan vara en rekryteringsplats för extremister. Lagkampen av många sådana spel och populariseringen av spelarens guilds i MMORPGs och klaner eller squads i FPS-spel leder naturligtvis till nära förbindelser mellan främlingar. Enkla spel kan leda till delning av ideologi och ansikte mot ansikte möten med villiga spelare, verkar det.

I en rapport (sidorna 13-15) hävdar Rand-boffinerna också att den öppna naturen av spel som Call of Duty göra dem potentiellt lätta för säkerhetstjänsterna att övervaka. Utgivarna av sådana videospel omfattas också av gällande säkerhetslagstiftning.

En annan potentiell teknik för kommunikation är "död brevlåda". I många spionfilmer använder agenter dessa som en säker plats för att fysiskt släppa av och hämta hemliga meddelanden. I åldern på internet har emellertid denna teknik flyttat till cyberspace. Istället för att skicka inkriminerande e-postmeddelanden kan brottslingar helt enkelt dela in inloggningsuppgifter för ett enda e-postkonto.

Person En loggar in på kontot, skriver ett meddelande för person B och sparar det till utkastmappen. Person B loggar in, läser meddelandet, lämnar sitt svar och raderar det ursprungliga meddelandet. Person A kan sedan logga in och läsa svaret. Inget mail skickas, så inga rubriker fångas av CCDP.

Nackdelen är att om säkerhetstjänsterna redan följer kontot kan de läsa meddelandet som flyter mellan de två misstänkta, även om det inte avslöjar några extra e-postadresser för att övervaka.

"Brännare" -telefoner

I några av de mest berövade områdena i Storbritannien under mitten av 1990-talet började mobiltelefonbutikerna trivas. Detta var trots telefoner och anropskostnader som fortfarande är förbjudna höga för de flesta. Det visar sig att droghandlarna köpte telefoner och använde dem för att hålla kontakten med kunder och leverantörer uppströms. Om polisen blev medveten om förekomsten av enskilda telefoner kunde de helt enkelt förstöras eller "brännas".

På grund av hur djupt mobiltelefonbutiker ibland kontrollerar personuppgifter när man registrerar en ny handenhet används brännare fortfarande. När den glamorösa ryska spiongen Anna Chapman insåg att hon hade blivit unmasked i USA år 2010 köpte hon omedelbart en ny telefon under ett antaget namn, enligt uppgift att registrera den till en adress i "Fake Street".

Att använda en riktig identitet när man köper en brännare kan vara lika enkelt som att rifla genom dina lager för räkningar och andra former av ID. Detta belyser behovet av att strimla allt som kan identifiera dig innan du slänger bort det.

I slutändan är det enda säkra sättet att hålla sig ur regeringens digitala nät om man undviker modern kommunikationsteknik. Att prata ansikte mot ansikte, skickar meddelanden via en mellanhand och andra tekniker kallas fältfartyg. Offentliga platser, slumpmässiga barer, höga klubbar och offentliga sammankomster används alla av brottslingar som är angelägna om att undvika att fånga, men att vara offentliga kan de också infiltreras av säkerhetstjänsten i strävan efter bevis.

Säkerhetstjänsten kan också få omfattande teckningsoptioner till bugbyggnader, och de använder även läsläsare för att analysera och transkribera bilder av hemliga samtal.

Det finns också tekniker som människor har använt i årtionden för att dölja meddelanden i vanlig syn, såsom steganografi. Någon kan gömma ett hemligt meddelande i en JPG-fil genom att mycket subtilt manipulera värdena för enskilda pixlar spridda i ett vanligt mönster i hela filen. Till den lediga observatören är förändringar i bilden odetekterbara, men rätt programvara, till exempel QuickStego, kan lagra och hämta det ursprungliga meddelandet.

I sin rapport från 2007 (sidan 31) sa Rand Corporation att subversiviteterna för närvarande inte tenderar att använda steganografi mycket, men att det skulle vara klokt att övervaka tekniken mot de växande hoten. Eftersom det här var en offentlig rapport är det lika försiktig att även anta att säkerhetstjänsterna nu aktivt söker efter meddelanden kodade i bildfiler.

Erkännande fuskar

Så saker blir hårdare för terrorister, men uppfinningsrikhet vet inga gränser. Den utbredda användningen av programvara som känner igen ansikten i folkmassor är besvärlig för mål som försöker förbli oupptäckta i bebyggda områden, men att anta outlandish smink och hårklipp kan vara en väg att lura det.

För sin masterprov i det interaktiva telekommunikationsprogrammet vid New York University har Adam Harvey utvecklat en teknik för att camouflera människor från Big Brother. Kallas CV Bländning, tekniken liknar den djärva asymmetriska kamouflage som finns på slagskepp under andra världskriget, utformad för att bryta upp linjer och förvirra fienden.

Solglasögon, mustasch och skägg beaktas lätt i ansiktsigenkänning, liksom hattar och hoodies. Programvaran identifierar ansikten från sina symmetriska egenskaper (två ögon, näsa, munplacering etc. i den vanliga konfigurationen). Harveys idé är att bryta upp dessa igenkännliga funktioner.

För att göra det experimenterade han med asymmetriska fransar som flopar in i ögonen och djärva streck av svart och vit smink över kinderna. Förutsatt att strimmorna är av olika mönster, verkar det som att den artificiella intelligensen blir förvirrad och inte kartlägger ansiktets egenskaper ordentligt.

Harveys CV Dazzle-webbplats ger massor av exempel, som bara lämnar problemet att sticka ut i en folkmassa till en avslappnad mänsklig observatör. Om det inte blir så, blir det en modeklaration för en ny webbsuntig generation som är angelägen om att det inte ska upptäckas av myndigheterna.