Google Booksi tõus ja langus.

Materjal Wikipediast – vabast entsüklopeediast

Otsustasin teha rea ​​postitusi selle kohta, kuidas puudutada oma kätega midagi, mida teoreetiliselt saab ainult vaadata või isegi mitte vaadata. See ei puuduta muidugi rindu (nendega on kõik lihtsam), vaid umbes elektroonilised raamatukogud ja arhiivid.

Mõni kulhatzker tõmbab seda tihedat lamerismist ja naiivset noobismi täis teksti lugedes kindlasti naerust kõhtu kinni, kuid paljud flotatsioonisööjad, st. Inimestele, kes on sageli väga küpsed ega tunne seda teie Internetti kuigi hästi, võivad tekstist kasu olla. Loomulikult käskis Jumal ise meil alustada Google Booksist.

Valime ühe, millel on Ameerika lipp, klõpsame sellel ja läheme kahtlasele veebisaidile, kus tavaliselt näeme välja „enter url”, kuhu sisestame väärtusliku aadressi http://books.google.com/ ja klõpsame „Mine”. .

Midagi sellist:

Kui kõik on hästi, siis näeme pilti, mis sarnaneb google-sharingu all nähtule. Kui teil veab anonüümseks muutjaga, on 100% potentsiaalselt allalaadimiseks saadaolevatest raamatutest nähtavad. Muidugi pole allalaadimine lihtne - seal on regulaarseid pause ja allalaadimiskiirus on väga ebastabiilne, kuid nagu öeldakse, ärge vaadake kingitud hobusele tagumikku.
Kõige täpsem on tegutseda mitte läbi anonüümsuse, vaid seadistades brauseris puhverserveri ühenduse. Sel juhul peate googeldama midagi sellist nagu "USA puhverserveri loend" ja valige otsingutulemustest sait, mis pakub teile midagi sellist:

Ei ole mõtet pakkuda linke konkreetsetele saitidele, sest... neid tuhandeid.
Järgmisena peate jätkama juhuslikult. Me läheme brauseri seadetesse. Avage Operas: "üldisätted> täpsemad> võrk> puhverserverid". IE-s on see veidi teistmoodi (emnip "ühendustes"). No see pole asja mõte. Puhverserveri aadressidega saidil valime loendist juhuslikult ühe puhverserveri, mis on HTTP-tüüpi (sokid ei paista töötavat). Kopeerige brauseris puhverserveri ühenduse seadetes koolonit ees olevad numbrid pikasse aknasse ja pordi number (numbrid pärast koolonit) samale reale väikesesse aknasse.
Midagi sellist:

Kõik. Klõpsake "OK" ja proovige minna mõnele saidile, mille puhverserver on sel viisil konfigureeritud. Kui sait avaneb, siis puhverserver töötab ja võite turvaliselt minna teenusesse Google Books. Kui ükski sait ei avane või ei avane seda väga aeglaselt, peate protseduuri kordama, kuid seekord proovige sisestada saidi loendist mõni muu puhverserver. Ülalkirjeldatud meetod on sisuliselt universaalne selles mõttes, et puhverserveri kaudu ei saa te mitte ainult Google Booksis tuhnida, vaid pääsete ligi ka ressurssidele, kus olete keelatud või lihtsalt ei soovi oma IP-d põletada (näiteks).
Tõeline arendaja läheks muidugi hulluks ja seadistaks mõne keeruka programmi, näiteks puhverserveri vahetaja, kuid miks peaks lihtsal flotofaagil nii raskusi olema?

Mõnikord on Google'is väga maitsvaid raamatuid (mõnikord isegi suhteliselt hiljuti avaldatud), mida saate isegi lehekülgede kaupa puudutada ja see pole isegi Vene IP all keelatud. Nüanss seisneb selles, et Google lubab korraga vaadata vaid paarikümmet lehekülge ja ongi kõik. On mitmeid viise, kuidas välja tõmmata palju rohkem, kui peaksite. Inimesed pingutavad nii palju kui suudavad. Keegi tuleb sisse õige raamat tuhandetelt erinevatelt IP-delt (muide, tõesti, tosina Hollandi anonüümisaatori kaudu saab ühe istumisega pool raamatut tippida), palub keegi sõpradel-tuttavatel selliselt ja selliselt lehelt alla laadida ja meiliga saata. Lõpuks kasutavad paljud inimesed Firefoxi jaoks google'i raamatute allalaadija 2.3 skripti (kuid ilma puhverserveri vahetajaga ühenduseta, mida ma isiklikult ei valdanud, pole see meede eriti tõhus - alla laaditakse ainult iga neljas leht, ei midagi enamat). Kõige tõhus lahendus Kuni viimase ajani oli programmiks google raamatute allalaadija (arendatud adma). Uusim versioon programm oli 0.7.0 (build 0) Suurepärane - ta ründas ihaldatud raamatut kümnete erinevate IP-de vahelt, tõmbas lehti kaootilises järjekorras ja ootas enne iga viset paar sekundit, et mitte köita tähelepanu. Google'i robotid. Kolmel katsel laadisin alla 70-80% raamatust (s.o. võimaliku maksimumi) ja salvestasin omal valikul tulemuse kas PDF-failina või jpeg-failide komplektina eraldi kausta. Laadisin sel viisil alla kakskümmend raamatut ja hakkasin veel sama arvu alla laadima, kuid ei lõpetanud nende allalaadimist lihtsalt sellepärast, et "see pole enam seda väärt".

Umbes poolteist kuud tagasi lakkas töötamast. Kahjuks. Jääb vaid loota, et varem või hiljem juhtub see, mis juhtus rohkemaga. varasemad versioonid see programm – st. jällegi ilmub kuskilt välja arendaja ja viskab selle internetti uus versioon. Üldiselt annab otsingumootor “google book downloader” palvel lingid hulgale väärtusetule prügile, mida isegi need lubatud 30 lehekülge tegelikult alla laadida ei suuda või sama GBD vanadele versioonidele (muide, keegi mainis, et GBD vanad versioonid, eriti 0.6.9, näivad toimivat, kuid ma ei valeta - ma pole seda proovinud). Nii edasi Sel hetkel Vanamoodne meetod jääb alles – käsitsi salvestamine lehekülgede kaupa. pärast seda, kui Google meie IP keelab (“teie vaatamislimiit on ammendatud”), pääseme raamatule ligi Hollandi anonüümisaatori kaudu (googeldades sõnadega Dutch proxy), salvestame veel kümme lehekülge, nad keelavad meid, logime sisse teisest googlest. anon-ra ja nii edasi, kuni raamat ise muutub siniseks/täielik keeld (Google teeb seda vahel, kui näeb, et samale raamatule liiga intensiivselt ligi pääsetakse).

Tundub, et ma ütlesin kõike Google-raamatutest, kuid mul on endiselt tugev tunne, et ma unustasin midagi. Jätan meelde ja teen värskenduse.

Järgmine kord kirjutan HathiTrustist.

Google Books oli ettevõtte esimene ambitsioonikas eksperiment. Kuid isegi pärast 15 aastat ei suutnud ta maailma muuta. Ajakirjanik Scott Rosenberg rääkis, kuidas sündis idee digiteerida kõik raamatud ja kuidas see arenes.

Raamatud võivad teha imesid. Nagu Franz Kafka kunagi ütles: "raamat peaks olema kirves meie sees olevale jäätunud merele."

See ütlus pärineb Kafkalt, eks? Google saab kinnitada. Aga kus ja mis tingimustel Kafka seda ütles? Otsing toob esile tsitaatidega veebisaidid, kuid te ei tohiks neile loota. Tavaliselt omistavad nad kõik tsitaadid ekslikult Mark Twainile.

Sellele ja sarnastele küsimustele vastamiseks peate kasutama Google'i raamatuotsingut – tööriista, mis suudab otsida teksti miljonitest digiteeritud väljaannetest. Peate lihtsalt leidma otsingutulemuste ülaosas väikese nupu "veel" – see asub vahekaartide "Pildid", "Video" ja "Uudised" järel. Klõpsake sellel nupul ja valige "Raamatud".

Selgub, et Kafka "külmunud mere" tsitaat esines Kafka "Kirjades sõpradele, perekonnale ja toimetajatele" 27. jaanuaril 1904 dateeritud kirjas Oscar Pollackile.

Foto: Clive Darragh / Flickr

Google'i raamatuotsing on hämmastav tõhus vahend sarnaste ülesannete jaoks. Kui teenus 15 aastat tagasi ilmus, tundus idee võimatult ambitsioonikas: noor tehnoloogiaettevõte, kellel oli alles hiljuti õnnestunud jõuda läbipääsmatusse World Wide Webi infodžunglisse ja seda korrastada, kavatses oma otsinguvõimalusi võrguühenduseta laiendada. Skaneerides miljoneid trükitud raamatuid projektiga liitunud raamatukogudest, saaks ettevõte lisada oma andmebaasi kogu inimkonna ajaloo enne Interneti tulekut.

"Raamatud sisaldavad tuhandeid aastaid inimeste teadmised, ja võib-olla väga kvaliteetne vorm kõigist võimalikest,” ütles kaasasutaja Google Sergei Brin toona ajalehele The New Yorker antud intervjuus. "Selle eelise mittekasutamine on liiga suur möödalask."

Tänapäeval on Google kuulus oma lähenemise poolest ambitsioonikatele projektidele, valmisolekuga võtta endale kolossaalseid ülesandeid globaalses mastaabis. Paljud Google'i veteranid nõustuvad, et Books oli esimene selline projekt ettevõtte ajaloos: mõelge vaid, skannige kõiki maailma raamatuid!

Alguses oli Google Booksi eesmärk anda maailmale nägemus "utoopilisest kirjandusest", mis ühendab elektroonilise ajastu mugavuse trükitud raamatute tarkusega. Sel ajal tundus idee olevat kirjasõna jaoks ainulaadne: laadiksime kõik raamatud eetrisse ja see tooks mingil moel kaasa kirjaoskuse suurenemise kõigi Maa peal elavate inimeste jaoks. Selle asemel on Google Books saavutanud vaid vaikse keskaja, jagades oma andmebaasis tsitaate ja tekstikatkeid enam kui 25 miljonist raamatust.

Google'i töötajad ütlevad, et nad ei oodanud midagi enamat. Võib-olla on see tõsi. Kuid võime kindlalt öelda, et need panid kõik teised lootma enamat.

Teel kosmilistest lubadustest igapäevaellu juhtus Google Booksiga kaks asja. Varsti pärast käivitamist muutus projekt idealistide paradiisist juriidiliseks põrguks: autorid hakkasid võitlema Google'i õiguse eest oma teoseid indekseerida ning ka kirjastajad hakkasid oma tööstust kaitsma elektrooniliste teenuste pealetungi eest. Järgnes kümme aastat kestnud kohtulahing, mis lõppes alles eelmisel aastal, kui USA ülemkohus lükkas kirjanike gildi hagi tagasi ja eemaldas lõpuks kõik tõkked Google'i kirjanduslike ambitsioonide eest.

Sel ajal toimus aga Google Booksis veel üks muudatus – see on tuttav peaaegu igale organisatsioonile või inimrühmale, kes on takerdunud pikkadesse juriidilistesse võitlustesse. Projekt on kaotanud oma endise indu ja ambitsiooni.

Kui ma selle teksti kallal töötama hakkasin, kartsin, et Booksi projekti ei eksisteeri enam Google'i olulise osana, et ettevõte on sellest täielikult loobunud. Google Books, nagu ka paljud ettevõtte ideed, on alati olnud veidi müsteerium, kuid nüüd, kui olen hakanud küsimusi esitama, tundub, et kõik on läbi kukkunud. Nädalaid ei leidnud ma kedagi, kes oleks saanud rääkida praegune olek projekt.

Foto: imadc/Depositphotos

Mitmed endised projektitöötajad, kellega rääkisin, jagasid oma kahtlust, et ettevõte on lõpetanud raamatute skaneerimise. Hiljem sain teada, et väike rühm töötajaid tegeleb endiselt raamatute otsimise ja uute pealkirjade lisamisega, kuigi palju väiksema intensiivsusega kui projekti tippajal aastatel 2010–2011.

"Meie jaoks ei ole väljamõeldud funktsioonid ja funktsioonid, mis on kasutajatele kohe nähtavad, nii olulised," ütleb projekti praegune juht Stephane Jaskiewicz, kes on meeskonnas töötanud kümmekond aastat. "Pigem töötame kulisside taga ja lihvime tehnilist poolt: uue sisu lisamine, selle töötlemine, et raamatut oleks võimalik veebis vaadata, ja otsingualgoritmi silumine."

Üks väljakutse on Google Booksi jaoks alati oluline olnud: indeksoijate täiustamine, mis lisavad "korpusesse" uusi raamatuid, nagu andmebaasi tavaliselt nimetatakse. Projekti alguses, 2002. aastal, otsustasid Larry Page ja Marissa Mayer hinnata, kui kaua kulub kõigi Maa peal olevate raamatute skannimiseks, ning asetasid metronoomi digikaamera kõrvale statiivile. Kui ettevõte seadis endale eesmärgiks viia kiirus efektiivsele tasemele, hakati töö detaile hoolikalt varjama.

Jaskewitz kinnitab, et skannimise seadistus paraneb jätkuvalt ja värskendused ilmuvad iga kuue kuu tagant. Väga abiks on LED-valgustuse tehnoloogiad, mis projekti käivitamise ajal veel nii levinud ei olnud. Kasulik on ka tehase operaatorite produktiivsemate lehekeeramistehnikate õppimisest. "See on nagu kitarri valimine," ütleb Jaskewitz. – Leiame inimesi, kellel on omad viisid flippimiseks – spetsiaalne tootmine pöial ja muid sarnaseid tehnikaid."

Suurem osa Google Booksi tööst jääb siiski "otsingukvaliteedi" parandamiseks – nii et leiate vajaliku Kafka tsitaadi veelgi kiiremini ja usaldusväärsemalt. See on mäng, kus võitjad ei saa universaalset tunnustust – kõige rohkem auhinda parimale varumängijale.

Et mõista, kuidas Google Booksi projekt selleni jõudis, peate teadma midagi autoriõigusest, mis jagab kõik raamatud kolme kategooriasse. Mõned raamatud on avalikud, mis tähendab, et saate tekstiga teha, mida soovite. Need on peamiselt enne 1923. aastat ilmunud raamatud, aga ka rohkem kaasaegsed teosed, mille autorid on otsustanud standardsetest autoriõigustest loobuda. Paljud uuemad raamatud on endiselt trükis ja kuuluvad autoriõiguse kaitse alla: kui soovite teksti kasutada oma eesmärkidel, peate selle autori ja kirjastajaga läbi rääkima.

Mitmele raamatule see osakaal vastab? Seda on raske öelda, kuna keegi ei tea täpselt, kui palju raamatuid Maal kokku on. See arv sõltub sellest, mida peetakse "raamatuks", ja nende piiride määratlemine pole lihtne. Google'i insener Leonid Taycher kirjutas 2010. aasta blogipostituses, et pärast metaandmete analüüsi tegi Google Books kindlaks koguarv raamatuid (tol ajal) 130 miljonit. Teised eksperdid nimetasid seda uuringut "rumalaks". Tõenäoliselt on tegelik raamatute arv väiksem kui Thacheri hinnangul, kuid oluliselt suurem kui praegu Google Booksi andmebaasis sisalduv 25 miljonit.

Seega on märkimisväärne osa sellest tohutust arvust „orbteos”. Kuni viimase ajani ei tekitanud need erilisi probleeme. Saate selle laenutada raamatukogust või leida selle probleemideta raamatupoest. Kuid niipea, kui Google teatas oma soovist need raamatud skannida ja Internetis kättesaadavaks teha, nõudsid kõik oma õigusi neile.

Järgnenud juriidilisest arutelust sai sisuliselt lahing nende orbude hooldusõiguse üle. Google, kirjastajad ja autorid on püüdnud saavutada kontrolli nende raamatute uude digimaailma kolimise protsessi üle. Selle tulemusel jõudsid need kolm osapoolt kompromissile, mida nimetati Google'i raamatute lepinguks. Selle tingimuste kohaselt sai Google võimaluse avaldada raamatuid täielikult Internetis, ilma et oleks pidanud maksma autoriõiguste omanikele hüvitist. Kuid 2011. aastal tunnistas föderaalkohtunik lepingu kehtetuks, kuna oli mures, et erakasumit taotlevast ettevõttest saab igaveseks uute raamatute registripidaja ja kogu maailma kirjanduse kasumi koguja.

Niipea kui leping lakkas töötamast, hakkas Google uuesti raamatuid skannima ja kirjastajad sukeldusid paljutõotavale turule e-raamatud, mis kahjustas Google'i positsiooni võidujooksus liidripositsioonile tänu Amazoni Kindle'i edule. Kuid Autorite Gild ei ole oma hagist loobunud, väites, et Google'i julge katse roomata ja indekseerida kõiki raamatuid ilma autoriõiguste omanike loata oli ebaseaduslik.

Google on rikas ettevõte, kuid mitte piisavalt rikas, et ignoreerida mitme miljardi dollari suuruste trahvide ohtu autoriõiguste rikkumise eest (miljoneid raamatuid ja tuhandeid dollareid trahve iga eest). Kogu see protsess kestis, kuni USA ülemkohus eelmisel aastal sellele lõpu tegi, tagades lõplikult Google'i õiguse raamatuid kataloogida ja kuvada. lühikesed väljavõtted(“jupid”) sisse Otsingu tulemused samamoodi tehakse seda veebilehtede puhul.

See kohtuotsus oli veebiotsingu tuleviku – Google’i ja kogu maailma – jaoks oluline edasiminek. "See on nüüd ametlik pretsedent, millest saavad kasu kõik," ütleb Erin Simon, praegune Google Booksi tootenõustaja. - See juhtum on õpikutes. Kõigepealt on oluline määratleda, mida õiglane kasutamine täpselt tähendab. (Simon märkis ka naeratades, et autoriõiguste valdajate hagi esitamise ajal polnud ta veel akadeemiasse õppima asunud.)

Kuigi autorite gild kaotas kohtuprotsessi, on selle esindajad kindlad, et nad võitlesid õiglase eesmärgi nimel. Guildi president James Gleick ütleb, et Google "läks algusest peale valele teele: "Nad alustasid ilma loomekogukonda kaasamata, millele nad tuginevad. Suured ettevõtted kohtlevad loomingulist tööd nii, nagu neil oleks "esimese öö õigused". Nad peavad end maailma peremeesteks. Selle asemel oli küsimus lihtsalt litsentside hankimises.

Võiks arvata, et võit sisse ülemkohus tähendas uut energiatõusu Google Booksi töös: käivitage skannerid, täie hooga edasi! Kuid kõik märgid näitavad, et antud juhul midagi sellist ei juhtunud, osaliselt seetõttu, et baas oli juba tohutu.

"Meil on kõige jaoks kindel eelarve," selgitab Jaskewitz. «Alguses skaneerisime kõike, mis kätte sai. Mingil hetkel hakkasime saama palju duplikaate. Nüüd on Google hakanud pakkuma koostööd tegevatele raamatukogudele kõige huvitavamate loendeid.

Foto: Amy/Flickr

Endise entusiasmi kadumisele on palju muid selgitusi. Pärast kohtuvaidlust ebameeldiv järelmaitse. Uute paljutõotavate ideede esilekerkimine, mis tasus end kiiremini ära. Ja veel üks asi: järkjärguline arusaam, et kõigi maailma raamatute skannimine, ükskõik kui kasulik see ka ei tooks, ei pruugi maailma nii palju muuta, kui loodeti.

Paljude bibliofiilide jaoks on Google'i soov saada maailma raamatukogu polnud mõtet: mõned inimesed said selle rolliga suurepäraselt hakkama avalikud organisatsioonid. Kui Google näitas, et maailmakirjanduse skannimise idee on teostatav, võtsid teised selle idee kasutusele. Brewster Kahle'i Interneti-arhiiv, mis dokumenteerib Interneti arendamise etappe, on juba oma andmebaasi skanninud. Ameerika digitaalne avalik raamatukogu kasvas välja kohtumistest Harvardi Berkmani keskuses 2010. aastal ja on nüüd kogumik. digitaalsed kogud paljud raamatukogud ja organisatsioonid.

Kui Google pidas läbirääkimisi ülikoolide raamatukogudega nende kogude skannimiseks, kohustus ettevõte andma raamatukogudele andmete koopiaid ning 2008. aastal hakkas HathiTrust neid faile koguma ja kasutamiseks pakkuma. (Samuti pidi ta end kaitsma Autorite Gildi hagi eest.)

HathiTrust hõlmab 125 organisatsiooni ja institutsiooni, kes "on kindlad, et koos saavad nad aidata teaduslikud uuringud ja kultuurivahetus on parem kui üksinda või jätta see ettevõtetele nagu Google,” ütleb ühiskonna direktor Mike Furlough. Lisaks on seal ka Kongressi raamatukogu, uus juht mis – Carla Hayden – võttis enda peale oma kogude digiteerimise ja avalikult kättesaadavaks tegemise.

Kõik need organisatsioonid on mõnes mõttes Google Booksi konkurendid. Tegelikkuses on Google aga nii kaugele ette läinud, et on ebatõenäoline, et keegi neist suudab ettevõttega võrdsetel tingimustel konkureerida.

Paljud eksperdid nõustuvad, et Google'ile läks Google'i raamatute loomine maksma mitusada miljonit dollarit ja ükski teine ​​organisatsioon ei maksaks alternatiivi hankimiseks selliseid kulutusi.

Mittetulundusühingutel on aga eelis, mida Google ei tee: nad on immuunsed prioriteetide muutumise suhtes, mis võib juhtuda hiiglasliku ettevõttega. Kogu nende tähelepanu on keskendunud raamatutele ja nad ei pea jagama oma tähelepanu ühe maailma suurima ettevõtte juhtimise või operatsioonisüsteem nutitelefonide jaoks. Erinevalt Google'ist on mittetulundusühingud alati huvitatud uute viiside leidmisest lugejate ühendamiseks raamatutega, mis aitavad, nagu Kafka ütleks, külmunud meele sulatada.

Rohkem kui üks kord ajaloos, lõputult katsumused muutusid võimsateks pööristeks, mis imesid endasse ja uputasid kõik asjas osalejad. (Kirjanduses näitas seda kõige selgemalt Dickens filmis Bleak House: mitu põlvkonda hõlmanud kohtuasi Jarndyce v. Jarndyce viis selleni, et kõiki kaalul olevaid varasid kasutati kohtukulude tasumiseks.)

„Kui Google suudaks selle andmekorpuse võtta, jagada žanriteks, teemadeks, ajaperioodideks ja kõikideks muudeks võimalikeks kategooriateks ning seejärel teha andmebaasi inseneridele ja masinõppe entusiastidele kättesaadavaks, võiks sellest midagi huvitavat välja tulla – seda on võimatu öelda. praegu, see,” selgitab Sloan. Ta soovitas, et Google teeb seda juba sisemiselt. Jaskewitz ja teised Google'i eksperdid keeldusid neid spekulatsioone kommenteerimast.

Võib-olla, kui järgmine tuleviku närvivõrk saab teadvuse ja tunneb Kafkale omast eksistentsiaalset kriisi, suudab see leida lohutust õigest raamatust, mis aitab jää sulada. Või erinevalt meist suudab see võrk lugeda Kõik Raamatuid, mida me skaneerisime, on tõesti loetud, nagu peakski tegema. Mida ta siis teeks?