Learn how to seo tips

Phân tích cách dùng Robots.txt không đúng cách

Discussion in 'Sitemap' started by logostyle, 13/5/13.

  1. logostyle

    logostyle Level 0

    Ví tiền:
    $539,73
    Sử dụng Robots.txt không đúng cách có thể làm công sức mà các dịch vụ SEO gầy dựng đổ sông đổi biển. Những điểm rất căn bản, rất dễ sửa nhưng nếu sai sẽ gây hậu quả nghiêm trọng.
    [​IMG]

    Tập đoàn Liberty Mutual có trụ sở chính đặt tại Thành phố Boston, bang Massachusetts, Mỹ và hiện có hơn 45,000 nhân viên làm việc tại hơn 900 văn phòng trên toàn thế giới.
    Liberty hiện là Tập đoàn bảo hiểm phi nhân thọ lớn thứ 5 tại nước Mỹ, được Tổ chức A.M Best Co. đánh giá ở mức “Xuất sắc” (A/Excellent) và xếp vào danh sách 100 tập đoàn lớn nhất nước Mỹ dựa vào doanh thu năm 2009.


    [​IMG]
    Đây là file robots của Liberty Insurance
    Kết quả tìm kiếm
    [​IMG]
    Vẫn ở kết quả đầu tiên nhưng không còn chi tiết về description nữa.
    [​IMG]
    Trong source code trang chủ vẫn cho phép robots Index và follow nhưng file robots.txt đã vô hiệu hóa phần meta này. Như vậy, robots.txt có sức mạnh nhiều hơn Meta Tag.
    Các kết quả được index trước đây vẫn xuất hiện trên trong phần index. Tuy nhiên nếu không khắc phục, số lượng trang index sẽ từ từ mất đi cho tới khi về không (Zero).​
    [​IMG]
    Bonus:
    Đặt sai vị trí của Robots.txt sẽ không có tác dụng ở website ILA Việt Nam
    ILA Việt Nam đã block khá nhiều liên kết để Robots không vào index những thông tin nhạy cảm, nhưng đặt sai vị trí​
    [​IMG]
    Nên Bots vẫn vào đọc nội dung bình thường​
    [​IMG]
  2. Nguyen_Thu

    Nguyen_Thu Level 0

    Ví tiền:
    $638,74
    vẫn chưa hiểu ý bác lắm ????
  3. raovatonline.vn

    raovatonline.vn Level 0

    Ví tiền:
    $728,98
    có lần mình dùng file robots.txt để chặn bot mà chặn ko thành công. domain/member chặn link này nhưng thấy vẫn dc index
  4. saokim

    saokim Level 0

    Ví tiền:
    $429,22
    Chỉ áp dụng cho các link mới thôi, cái nào đã index rồi thì thôi
  5. dotrungkien100888

    dotrungkien100888 Level 0

    Ví tiền:
    $327,00
    hề thảo nào hôm em cũng làm thử nhưng với link cũ , thấy nó vẫn nidex bình thường , e lại cứ tưởng có lỗi ở đâu đó cơ :www_MyEmoticons_com
  6. hmoa

    hmoa Level 0

    Ví tiền:
    $400,00
    Trường hợp của Liberty Mutual chắc họ không muốn cho GG index.
  7. nguyennt0588

    nguyennt0588 Banned

    Ví tiền:
    $151,11
    thế có cách nào xóa cái link nó đã index rồi đi ko bác .
  8. luatvns

    luatvns Level 1

    Ví tiền:
    $644,59
    cái xóa index chắc bạn phải xóa url trong google mastertool có chức năng này thì phải bạn ak
  9. loius

    loius Level 0

    Ví tiền:
    $330,00
    Không hiểu lắm :|, trong tools GG có chức năng xem cái robots này mừk
  10. loibinky

    loibinky Level 1

    Ví tiền:
    $680,10
    Bạn nghĩ sao mà Liberty Mutual lại muốn như vậy? đâu cần phải chạn thể Des, có chặn thì chặn thông tin trên web, nhưng không thể làm như vậy.
  11. luong_duy_khanh

    luong_duy_khanh Level 0

    Ví tiền:
    $411,00
    Hiểu rồi 1 công ty em biết 4 năm không được index vì vậy nè
  12. manhvanit

    manhvanit Level 0

    Ví tiền:
    $502,16
    Chào mọi người !

    M cũng đanng tìm hiểu để seo website của mình. Sếp đang yêu cầu seo lên top trong tháng này

    Nhưng m mới chỉ add sitemap thôi chứ chưa làm gì cả !

    mình muốn viết robot.txt cho web cua mình http://eduplus.vn/ mà ko biết viết từ đâu

    Mong mọi người chỉ giúp, nếu có code mẫu send cho mình với

    và mình muốn sử dụng file robot.txt này cho website khác được ko ?

    Thanks all !
  13. trannhu00

    trannhu00 Level 0

    Ví tiền:
    $330,00
    cũng hay nhỉ có công ty muốn lên top nhưng lại có công ty muốn ẩn dật dấu mặt
  14. hocseonao

    hocseonao Level 0

    Ví tiền:
    $320,00
    Bài viết nay khó hiểu quá trời luôn đó ! Bác xem thế nào giải thích dõ hơn được không, em xin chân thành cảm ơn !
  15. dungcao

    dungcao Level 0

    Ví tiền:
    $417,00
    web này dùng joomla thì phải mà thấy bình thường mà nhỉ :-/
  16. easyriderteam

    easyriderteam Level 0

    Ví tiền:
    $380,00
    thực ra bạn ko nên vừa dùng code và vừa dùng robot file. Nếu đã đăng ký trên webmaster thì robot file đã craw bạn từ a - z rồi nếu bạn lỡ allow !
  17. princelonely

    princelonely Level 0

    Ví tiền:
    $584,45
    Vao GWT, bạn vào phần xóa URL đấy, trong đó bạn muốn xóa bnhieu thì xóa. Sau 24h GG sẽ loại bỏ link đó khỏi đánh sách đã index
  18. laptopvdc

    laptopvdc Level 0

    Ví tiền:
    $435,00
    web của mình ko có robot.txt thì có sao ko nhỉ
  19. daiphuthinh

    daiphuthinh Level 1

    Ví tiền:
    $1.105,68
    Không có robot thì web không chặn dc phần tử xấu thôi.
  20. svma2

    svma2 Banned

    Ví tiền:
    $198,23
    file robot.txt đúng là đơn giản, nhưng nếu sai lệnh 1 cái là tác dụng phụ thật khó lường

Share This Page