Jeta kniga poswqschena ispol'zowaniü usowershenstwowannogo prilozheniq web crawler dlq dobychi relewantnoj arhiwnoj informacii s web-sajtow bez funkcii isklücheniq robotow, bud' to publichnyj ili temnyj web. Medlennoe wremq wypolneniq i slozhnost' bol'shinstwa suschestwuüschih prilozhenij web-kraulerow byli odnimi iz osnownyh problem w ätoj oblasti, s kotorymi programmisty (pol'zowateli) stalkiwalis' na protqzhenii mnogih let. Jeto nowoe usowershenstwowannoe prilozhenie budet reshat' obe problemy, a takzhe obespechiwat' rezul'tat, sootwetstwuüschij poiskowomu zaprosu pol'zowatelq. Prilozhenie wklüchaet w sebq znaniq sowremennyh tehnologij, takih kak komp'üternoe programmirowanie, mashinnoe obuchenie, bol'shie dannye, intellektual'nyj analiz dannyh, parsing dannyh i mnogoe drugoe.