Bật mí kỹ thuật chặn bot Ahrefs bí mật SEO 0 backlink

Discussion in 'Thủ thuật Seo - Seo tips' started by tienanh, Aug 12, 2015.

  1. Hiện tại có một số member mạo danh BQT để giao dịch trên diễn đàn và đã LỪA ĐẢO khá nhiều tại chuyên mục Adwords... Mọi người cảnh giác và đọc bài: Giới thiệu giao dịch đảm bảo bởi @Admin
Lượt xem: 24,204
  1. tienanh

    tienanh Cựu Administrator

    Joined:
    Jul 1, 2013
    Messages:
    888
    Likes Received:
    411
    Trophy Points:
    450
    Gender:
    Male
    Home page:
    Best Answers:
    0
    Thấy mấy anh em hỏi chặn bot ahrefs như nào? Thì em vừa đi làm về đang chán cơm quán ngồi chả biết làm gì viết cho anh em cách chặn bot ahref chơi .

    Về riêng bot ahref thì em có 2 cách là dùng robots.txt và htaccess . Còn anh em nào thích chặn bot khác thì cmt em bổ sung sau.

    Ảnh chụp Màn hình 2015-08-11 lúc 204912
    ví dụ về chặn botAhrefs​

    Riêng cách 1 là chắc chắn còn cách 2 thì cũng tuỳ,có người bảo được có người không,em cứ share anh em thích thì thử nghiệm không thì thôi ạ

    C1 : Chặn bằng robots.txt

    Code:
    User-agent: AhrefsBot
    Disallow: /

    Ngoài ra,mọi người có thể kiểm soát tần số của AhrefsBot đến trang web của mình bằng cách xác định sự chậm trễ tối thiểu chấp nhận được giữa hai yêu cầu liên tiếp từ bot như sau (trong robots.txt):

    Code:
    User-Agent: AhrefsBot
    Crawl-Delay: 2

    trong đó chú ý giá trị của tham số Crawl-Delay tính bằng giây

    C2 : Hoặc Chặn bằng htaccess

    Code:
    #htaccess mod rewrite code
    Options +FollowSymLinks -MultiViews
    RewriteEngine On
    RewriteBase /
    RewriteCond %{HTTP_USER_AGENT} ^Rogerbot* [OR]
    RewriteCond %{HTTP_USER_AGENT} ^Exabot* [OR]
    RewriteCond %{HTTP_USER_AGENT} ^MJ12bot* [OR]
    RewriteCond %{HTTP_USER_AGENT} ^Dotbot* [OR]
    RewriteCond %{HTTP_USER_AGENT} ^Gigabot* [OR]
    RewriteCond %{HTTP_USER_AGENT} ^AhrefsBot* [OR]
    RewriteCond %{HTTP_USER_AGENT} ^BlackWidow* [OR]
    RewriteRule ^(.*)$ / [L,R=301]

    Em viết hết rồi ạ,em buồn ngủ quá,không thông não tìm thêm đc,hình như còn cách chặn IP hay cách nào nữa anh em bổ sung bên dưới nhé ,em ngủ phát........... zzZZZzzz !

    P/s : cần cân nhắc kỹ càng quyết định có chặn Ahref hay không,bởi sau này còn sử dụng em nó nhiều :)

    Nguồn : http://tienanhplus.blogspot.com/2015/08/tiet-lo-cach-chan-bot-ahrefs-bi-mat-tỷ lệ cược bet365_trò chơi điện tử bet 365_ở việt nam có thể chơi bet365 không?.html
    Last edited: Aug 12, 2015
  2. phuongnamvina.seo

    phuongnamvina.tỷ lệ cược bet365_trò chơi điện tử bet 365_ở việt nam có thể chơi bet365 không? Top 9

    Joined:
    Oct 9, 2013
    Messages:
    144
    Likes Received:
    9
    Trophy Points:
    180
    Best Answers:
    0
    Thực tế em chưa hiểu bác chặn Bots Ahref để làm gì? Bác có thể giải thích vấn đề này được không?
    Những thành viên đã thích bài này: zozo212
  3. quaythuoc.org

    quaythuoc.org Top 9

    Joined:
    Aug 1, 2015
    Messages:
    64
    Likes Received:
    1
    Trophy Points:
    80
    Gender:
    Male
    Home page:
    Best Answers:
    0
    Thảo nào thấy mấy bác top thi thoảng có người chả thấy link nào. Làm thế đỡ bị đối thủ dòm ngó :3
  4. huyenthoai_2014

    huyenthoai_2014 Top 9

    Joined:
    Aug 30, 2014
    Messages:
    122
    Likes Received:
    7
    Trophy Points:
    180
    Gender:
    Female
    Best Answers:
    0
    Bạn cho mình hỏi kỹ một chút được không, chặn bot Ahrefs để tránh đối thủ mình check backlist sao ?
  5. tienanh

    tienanh Cựu Administrator

    Joined:
    Jul 1, 2013
    Messages:
    888
    Likes Received:
    411
    Trophy Points:
    450
    Gender:
    Male
    Home page:
    Best Answers:
    0
    Tùy mục đích người dùng,tuy nhiên vài cao thủ họ chặn bot để không bị đối thủ bám đuổi cách đi link của họ :)
    Những thành viên đã thích bài này: tuanld
  6. mitmat

    mitmat Top 9

    Joined:
    Apr 12, 2012
    Messages:
    280
    Likes Received:
    21
    Trophy Points:
    180
    Home page:
    Best Answers:
    0
    Chặn cũng tốt tuy nhiên chẳng may web bị đối thủ sờ pam -_- thì lúc đó tìm link ở đâu -_-
  7. tienanh

    tienanh Cựu Administrator

    Joined:
    Jul 1, 2013
    Messages:
    888
    Likes Received:
    411
    Trophy Points:
    450
    Gender:
    Male
    Home page:
    Best Answers:
    0
    Chính xác đó là điều mình nói cần phải cân nhắc trước khi hành động :)
  8. vem.vn

    vem.vn Top 9

    Joined:
    Jun 29, 2015
    Messages:
    104
    Likes Received:
    14
    Trophy Points:
    180
    Gender:
    Female
    Best Answers:
    0
    Vẫn còn soi link để chạy theo và thắc mắc dofolow hay nofolow khi build link thì chưa thể gọi là cao thủ,
  9. seo4cdx

    tỷ lệ cược bet365_trò chơi điện tử bet 365_ở việt nam có thể chơi bet365 không?4cdx Top 9

    Joined:
    Jul 14, 2015
    Messages:
    48
    Likes Received:
    1
    Trophy Points:
    80
    Gender:
    Male
    Best Answers:
    0
    Mình cũng thử chặn từ khá lâu rồi nhưng vào kiểm tra trong ahrefs vẫn còn thông số backlinks

    bỏ đoạn code chặn bot ahrefs đi sau 2h lại có các thông số bình thường.
  10. thang5link

    thang5link Top 9

    Joined:
    Jul 27, 2015
    Messages:
    299
    Likes Received:
    11
    Trophy Points:
    180
    Gender:
    Male
    Home page:
    Best Answers:
    0
    SEO không cần backlink dạo này thấy khá nhiều bác nói đến vấn đề này nhưng thấy cũng không có nhiều người biết
  11. vem.vn

    vem.vn Top 9

    Joined:
    Jun 29, 2015
    Messages:
    104
    Likes Received:
    14
    Trophy Points:
    180
    Gender:
    Female
    Best Answers:
    0
    SEO không back link thì cần nhiều truy vấn, tối ưu page và content tốt, tuy nhiên chỉ các từ khóa dễ và trung bình , còn từ khóa khó thì chưa có cửa,

    Không nói đến các site thương hiệu mạnh.vậy nên yếu tố baclink vẫn phải có trong SEO.
  12. anhhuyymb

    anhhuyymb Top 9

    Joined:
    Aug 12, 2015
    Messages:
    52
    Likes Received:
    0
    Trophy Points:
    60
    Gender:
    Male
    Best Answers:
    0
    chặn boss ahrefs thì đối thủ nó mới không phân tích được đối thủ được
  13. seotadien

    tỷ lệ cược bet365_trò chơi điện tử bet 365_ở việt nam có thể chơi bet365 không?tadien Top 7

    Joined:
    Oct 30, 2012
    Messages:
    1,720
    Likes Received:
    495
    Trophy Points:
    470
    Gender:
    Male
    Best Answers:
    0
    Thực tế thì mấy cách chặn này được chính bên Ahrefs hướng dẫn trong blog của nó roài :p:p:p dẫu sao cũng cảm ơn @tienanh đã chia sẻ.

    Việc chặn bots này giúp cho đối phương không scan được hệ thống bạcklink bạn đã làm, tung hoả mù tý ấy mà :D:D:D nhưng gặp Seo pro hơn tý sẽ dùng Majestic tỷ lệ cược bet365_trò chơi điện tử bet 365_ở việt nam có thể chơi bet365 không? để scan nên chắc phải chặn toàn bộ mấy công cụ check thì mới đảm bảo hơn được tý tẹo thui nha :mad::mad::mad:
    Những thành viên đã thích bài này: vuontrentuong
  14. dungca

    dungca Top 9

    Joined:
    Aug 8, 2014
    Messages:
    482
    Likes Received:
    17
    Trophy Points:
    180
    Gender:
    Female
    Best Answers:
    0
    mình có thể truy cập vào webmast tool để kiểm tra những liên kết đến với website mình cho nên chặn robot có thẻ là phương án tốt để đối thủ mình không phân tích được
  15. ichiase24h

    ichiase24h Top 9

    Joined:
    Jun 17, 2015
    Messages:
    174
    Likes Received:
    3
    Trophy Points:
    180
    Gender:
    Male
    Home page:
    Best Answers:
    0
    toàn code là code đọc xong cũng chưa hình dùng ra là như thế nào :D
  16. tienanh

    tienanh Cựu Administrator

    Joined:
    Jul 1, 2013
    Messages:
    888
    Likes Received:
    411
    Trophy Points:
    450
    Gender:
    Male
    Home page:
    Best Answers:
    0
    ^^ hihi lâu lắm không chém với anh @tỷ lệ cược bet365_trò chơi điện tử bet 365_ở việt nam có thể chơi bet365 không?tadien ,dạo này ae bận quá cả mattcott nữa , để em thêm code rảnh rảnh block hết bot đi anh ơi cho tụi nó khỏi check cho vui :D

    Code:
    # ROBOTS.TXT STOPS BAD BOTS FROM CRAWLING YOUR WEB PAGES
    # PLEASE UPLOAD THIS FILE TO THE SAME FOLDER OF index.html
    
    User-agent: aipbot
    Disallow: /
    
    User-agent: ia_archiver
    Disallow: /
    
    User-agent: AhrefsBot
    Disallow: /
    
    User-agent: Alexibot
    Disallow: /
    
    User-agent: Aqua_Products
    Disallow: /
    
    User-agent: asterias
    Disallow: /
    
    User-agent: b2w/0.1
    Disallow: /
    
    User-agent: BackDoorBot/1.0
    Disallow: /
    
    User-agent: becomebot
    Disallow: /
    
    User-agent: BlowFish/1.0
    Disallow: /
    
    User-agent: Bookmark search tool
    Disallow: /
    
    User-agent: BotALot
    Disallow: /
    
    User-agent: BotRightHere
    Disallow: /
    
    User-agent: BuiltBotTough
    Disallow: /
    
    User-agent: Bullseye/1.0
    Disallow: /
    
    User-agent: BunnySlippers
    Disallow: /
    
    User-agent: CheeseBot
    Disallow: /
    
    User-agent: CherryPicker
    Disallow: /
    
    User-agent: CherryPickerElite/1.0
    Disallow: /
    
    User-agent: CherryPickerSE/1.0
    Disallow: /
    
    User-agent: Copernic
    Disallow: /
    
    User-agent: CopyRightCheck
    Disallow: /
    
    User-agent: cosmos
    Disallow: /
    
    User-agent: Crescent
    Disallow: /
    
    User-agent: Crescent Internet ToolPak HTTP OLE Control v.1.0
    Disallow: /
    
    User-agent: DittoSpyder
    Disallow: /
    
    User-agent: dotbot
    Disallow: /
    
    User-agent: EmailCollector
    Disallow: /
    
    User-agent: EmailSiphon
    Disallow: /
    
    User-agent: EmailWolf
    Disallow: /
    
    User-agent: EroCrawler
    Disallow: /
    
    User-agent: exabot
    Disallow: /
    
    User-agent: ExtractorPro
    Disallow: /
    
    User-agent: FairAd Client
    Disallow: /
    
    User-agent: Fasterfox
    Disallow: /
    
    User-agent: Flaming AttackBot
    Disallow: /
    
    User-agent: Foobot
    Disallow: /
    
    User-agent: gigabot
    Disallow: /
    
    User-agent: Gaisbot
    Disallow: /
    
    User-agent: GetRight/4.2
    Disallow: /
    
    User-agent: Harvest/1.5
    Disallow: /
    
    User-agent: hloader
    Disallow: /
    
    User-agent: httplib
    Disallow: /
    
    User-agent: HTTrack 3.0
    Disallow: /
    
    User-agent: humanlinks
    Disallow: /
    
    User-agent: ia_archiver
    Disallow: /
    
    User-agent: IconSurf
    Disallow: /
    Disallow: /favicon.ico
    
    User-agent: InfoNaviRobot
    Disallow: /
    
    User-agent: Iron33/1.0.2
    Disallow: /
    
    User-agent: JennyBot
    Disallow: /
    
    User-agent: Kenjin Spider
    Disallow: /
    
    User-agent: Keyword Density/0.9
    Disallow: /
    
    User-agent: larbin
    Disallow: /
    
    User-agent: LexiBot
    Disallow: /
    
    User-agent: libWeb/clsHTTP
    Disallow: /
    
    User-agent: LinkextractorPro
    Disallow: /
    
    User-agent: LinkScan/8.1a Unix
    Disallow: /
    
    User-agent: LinkWalker
    Disallow: /
    
    User-agent: LNSpiderguy
    Disallow: /
    
    User-agent: lwp-trivial
    Disallow: /
    
    User-agent: lwp-trivial/1.34
    Disallow: /
    
    User-agent: Mata Hari
    Disallow: /
    
    User-agent: Microsoft URL Control
    Disallow: /
    
    User-agent: Microsoft URL Control - 5.01.4511
    Disallow: /
    
    User-agent: Microsoft URL Control - 6.00.8169
    Disallow: /
    
    User-agent: MJ12bot
    Disallow: /
    
    User-agent: MIIxpc
    Disallow: /
    
    User-agent: MIIxpc/4.2
    Disallow: /
    
    User-agent: Mister PiX
    Disallow: /
    
    User-agent: moget
    Disallow: /
    
    User-agent: moget/2.1
    Disallow: /
    
    User-agent: Mozilla/4.0 (compatible; BullsEye; Windows 95)
    Disallow: /
    
    User-agent: MSIECrawler
    Disallow: /
    
    User-agent: NetAnts
    Disallow: /
    
    User-agent: NICErsPRO
    Disallow: /
    
    User-agent: Offline Explorer
    Disallow: /
    
    User-agent: Openbot
    Disallow: /
    
    User-agent: Openfind
    Disallow: /
    
    User-agent: Openfind data gatherer
    Disallow: /
    
    User-agent: Oracle Ultra Search
    Disallow: /
    
    User-agent: PerMan
    Disallow: /
    
    User-agent: ProPowerBot/2.14
    Disallow: /
    
    User-agent: ProWebWalker
    Disallow: /
    
    User-agent: psbot
    Disallow: /
    
    User-agent: Python-urllib
    Disallow: /
    
    User-agent: QueryN Metasearch
    Disallow: /
    
    User-agent: Radiation Retriever 1.1
    Disallow: /
    
    User-agent: RepoMonkey
    Disallow: /
    
    User-agent: RepoMonkey Bait & Tackle/v1.01
    Disallow: /
    
    User-agent: RMA
    Disallow: /
    
    User-agent: rogerbot
    disallow: /
    
    User-agent: searchpreview
    Disallow: /
    
    User-agent: SiteSnagger
    Disallow: /
    
    User-agent: SpankBot
    Disallow: /
    
    User-agent: spanner
    Disallow: /
    
    User-agent: SurveyBot
    Disallow: /
    
    User-agent: suzuran
    Disallow: /
    
    User-agent: Szukacz/1.4
    Disallow: /
    
    User-agent: Teleport
    Disallow: /
    
    User-agent: TeleportPro
    Disallow: /
    
    User-agent: Telesoft
    Disallow: /
    
    User-agent: The Intraformant
    Disallow: /
    
    User-agent: TheNomad
    Disallow: /
    
    User-agent: TightTwatBot
    Disallow: /
    
    User-agent: toCrawl/UrlDispatcher
    Disallow: /
    
    User-agent: True_Robot
    Disallow: /
    
    User-agent: True_Robot/1.0
    Disallow: /
    
    User-agent: turingos
    Disallow: /
    
    User-agent: TurnitinBot
    Disallow: /
    
    User-agent: TurnitinBot/1.5
    Disallow: /
    
    User-agent: URL Control
    Disallow: /
    
    User-agent: URL_Spider_Pro
    Disallow: /
    
    User-agent: URLy Warning
    Disallow: /
    
    User-agent: VCI
    Disallow: /
    
    User-agent: VCI WebViewer VCI WebViewer Win32
    Disallow: /
    
    User-agent: Web Image Collector
    Disallow: /
    
    User-agent: WebAuto
    Disallow: /
    
    User-agent: WebBandit
    Disallow: /
    
    User-agent: WebBandit/3.50
    Disallow: /
    
    User-agent: WebCapture 2.0
    Disallow: /
    
    User-agent: WebCopier
    Disallow: /
    
    User-agent: WebCopier v.2.2
    Disallow: /
    
    User-agent: WebCopier v3.2a
    Disallow: /
    
    User-agent: WebEnhancer
    Disallow: /
    
    User-agent: WebSauger
    Disallow: /
    
    User-agent: Website Quester
    Disallow: /
    
    User-agent: Webster Pro
    Disallow: /
    
    User-agent: WebStripper
    Disallow: /
    
    User-agent: WebZip
    Disallow: /
    
    User-agent: WebZip
    Disallow: /
    
    User-agent: WebZip/4.0
    Disallow: /
    
    User-agent: WebZIP/4.21
    Disallow: /
    
    User-agent: WebZIP/5.0
    Disallow: /
    
    User-agent: Wget
    Disallow: /
    
    User-agent: wget
    Disallow: /
    
    User-agent: Wget/1.5.3
    Disallow: /
    
    User-agent: Wget/1.6
    Disallow: /
    
    User-agent: WWW-Collector-E
    Disallow: /
    
    User-agent: Xenu's
    Disallow: /
    
    User-agent: Xenu's Link Sleuth 1.1c
    Disallow: /
    
    User-agent: Zeus
    Disallow: /
    
    User-agent: Zeus 32297 Webster Pro V2.9 Win32
    Disallow: /
    
    User-agent: Zeus Link Scout
    Disallow: /
    
    User-agent: *
    Disallow: /js
    Disallow: *.js
  17. kuvuong

    kuvuong Top 9

    Joined:
    Aug 8, 2015
    Messages:
    30
    Likes Received:
    2
    Trophy Points:
    80
    Gender:
    Male
    Best Answers:
    0
    Chủ thớt không có phần mặt lợi và mặt hại khi dùng cách này để anh em tham khảo nhỉ? Dùng chẳng biết nó có hai cho site nữa. Theo mình con Bot Ahrefs cũng có 1 phần giá trị để GG nó đánh giá mà
  18. machino47

    machino47 Seo Newbie

    Joined:
    Apr 11, 2013
    Messages:
    19
    Likes Received:
    1
    Trophy Points:
    10
    Best Answers:
    0
    cái này làm dân tỷ lệ cược bet365_trò chơi điện tử bet 365_ở việt nam có thể chơi bet365 không? đau đầu đây
  19. parkhill

    parkhill Top 9

    Joined:
    Jul 30, 2015
    Messages:
    50
    Likes Received:
    3
    Trophy Points:
    80
    Gender:
    Female
    Home page:
    Best Answers:
    0
    Theo mình nghĩ vẫn là cách chặn dò " back links " của đối thủ. Rất hay.
  20. viethomedecor

    viethomedecor Top 9

    Joined:
    Aug 1, 2015
    Messages:
    41
    Likes Received:
    4
    Trophy Points:
    80
    Gender:
    Male
    Home page:
    Best Answers:
    0
    không thiếu gì cách để có thể phân tích được đối thủ nhé
    Những thành viên đã thích bài này: dienmaygiadinh1

Share This Page

Loading...