Video: Encantadia: Ang paglaki ng mga Sang’gre (with English subtitles) (Nobyembre 2024)
Sabihin mong ikaw ay isang online na purveyor ng mga ginamit na electronics. Ang iyong negosyo ay nakasalalay sa taong iyon na nais ng isang ginamit na iPad sa paghahanap ng iyong mahusay na mga presyo. Ngunit hindi ka magiging masaya kung nakuha ng isang katunggali ang iyong buong listahan ng presyo upang matalo ang iyong mga presyo nang sapat lamang . Paano mo mapapahintulutan ang buong pag-access para sa mga gumagamit habang pinipigilan ang pakyawan na pag-scrape ng iyong nilalaman? Kaya, maaari mong gamitin ang ScrapeDefender, isang solusyon na batay sa cloud-scraping na inilabas ngayon. Nakipag-usap ako kay Robert Kane, CEO ng ScrapeDefender, tungkol sa kung paano gumagana ang produkto.
Sino ang Kailangan nito?
"Nagtatrabaho na kami sa mga airline, consumer electronics, pamilihan sa pananalapi, at higit pa bilang mga customer ng beta, " sabi ni Kane. "Anumang website na nag-post ng maraming mahalagang nilalaman, mga listahan ng presyo, real estate … lahat ng nilalaman na iyon ay maaaring ma-ani. Ipinahiwatig ni Kane na habang ang ilang mga scraper ay gumagamit ng mga simpleng script, ang iba ay sumusubok na masquerade bilang mga tao sa pamamagitan ng pagkuha ng site nang mas mabagal, o paggamit ng maraming mga bot. "Ang hamon para sa mga may-ari ay, paano ko hahayaan ang mundo at mapanatili ang mga hindi awtorisadong bot, " pagtatapos ni Kane.
Iyon ay kung saan pumapasok ang ScrapeDefender. "Ang aming monitor ay isang passive tool, tulad ng Google Analytics, " sabi ni Kane. "Nagpasok ka ng isang linya ng code sa iyong site na hinahayaan kaming subaybayan ito 24/7. Isang linya lamang ng code sa header ng webpage. Dahil ito ay pasibo, walang epekto sa iyong network ng produksyon."
Online Dashboard
Maaaring tingnan ng isang customer ng ScrapeDefender ang isang pangkalahatang-ideya ng lahat ng mga naka-block na aktibidad sa pag-scrape, ngunit maaari ring maghukay nang malalim para sa buong detalye. Ipinakita ni Kane ang system, na ipinakita sa akin ang mga uri ng mga aktibidad na nagpapalaki ng isang pulang bandila. Marami ang tuwid. Ang IP address ng isang scraper ay may kaugaliang gumawa ng higit pang mga pagbisita sa site at mga hit sa pahina kaysa sa isang tao, at may posibilidad na manatili sa anumang pahina sa isang napakaikling panahon. Kahit na sinubukan nilang pumunta mabagal at maiwasan ang pagtuklas, makikita ang isang pattern. Ang mga pagbisita ng mga tao ay karaniwang may dalang referrer; ang mga pagbisita sa pamamagitan ng pag-scrape ng mga bot ay hindi nagagawa. Ang lahat ng mga pamantayang ito ay nag-aambag sa isang pangkalahatang marka ng peligro; isang mataas na sapat na marka halos palaging kinikilala ang aktibidad ng pag-scrape.
"Ang mga sopistikadong scraper ay gumagamit ng maraming mga IP address, " ang sabi ni Kane. "Ngunit gumagamit kami ng isang digital fingerprint upang tumugma sa mga nauugnay na sesyon kahit na naiiba ang IP. Maaaring ito ay isang script na tumatakbo sa iba't ibang mga makina, o iba't ibang mga virtual machine, ngunit pareho ang fingerprint.
Kumakalat, Walang Pagkiskis!
Tinanong ko kung ano ang mangyayari sa sandaling makilala ang isang scraper. "Ginagawa namin ang dalawang paraan na iyon, " sabi ni Kane. "Nag-aalok kami ng isang module ng seguridad na maaaring gawin ang pag-block para sa kanila, ngunit nalaman namin na ang mga samahan na aming pinagtatrabahuhan ay mayroong sariling firewall sa lugar. Kaya, mayroon kaming isang API na maaaring magpadala ng mga kahina-hinalang IP address sa kanilang firewall. "
Kaya, ano ang gastos? Ang pag-presyo ay nagsisimula sa $ 79 bawat buwan at kaliskis hanggang sa anumang website ng laki. "May isang taong nakipag-ugnay sa amin noong nakaraang linggo, " sabi ni Kane, "tungkol sa isang website na may 25 milyong mga view ng pahina … bawat araw ! Sinusuportahan namin ito."
Ang kumpanya ay magpapatakbo ng isang pag-scan sa tungkol sa 150 na mga kahinaan na nauugnay sa scrape para sa isang bagong customer, ngunit ang sinuman ay maaaring magpatakbo ng isang libreng pag-scan na sinusuri ang isang subset ng mga iyon. Bisitahin lamang ang website ng ScrapeDefender at ipasok ang domain name. Sa loob ng ilang minuto magkakaroon ka ng iyong sagot.
Ang kinabukasan
"Sa palagay ko, " sabi ni Kane, "ang antiscraping ngayon ay katulad ng maagang antivirus na negosyo. Ito ay isang napakalaking pagkakataon. Lahat ay magkakaroon nito." Sinabi niya na ang Snapchat ay maaaring gumamit ng teknolohiyang ito upang maiwasan ang pag-ani ng 4.6 milyong data ng mga gumagamit at sa gayo’y magtungo sa kamakailang pag-agay sa Snapchat spam.
"Ang CAPTCHA ay hindi isang solusyon, " sabi ni Kane. "Kahit na nagtrabaho ito, hindi ba nila narinig ang mga bukid ng CAPTCHA? Ang tunay na solusyon ay ang pagtingin sa pag-uugali at hadlangan ang pag-scrape ng mga pag-uugali."
Ito ay nananatiling makikita kung ang sapat na mga may-ari ng website ay pipiliang magbayad para sa isang solusyon na anti-scraping. Manonood ako upang makita kung paano naglalaro ang isang ito.
