Lỗi “Blocked due to unauthorized request (401)” trong Google Search Console xảy ra khi server yêu cầu thông tin đăng nhập nhưng Googlebot không thể cung cấp. Đây là tình trạng lỗi cần được khắc phục nhanh chóng nếu không sẽ khiến website tiêu hao nhiều ngân sách thu thập dữ liệu. Để xử lý tình trạng lỗi này, hãy cùng Vietnix tìm hiểu ngay sau đây.
Nguyên nhân xảy ra lỗi “Blocked due to unauthorized request (401)”
Status codes là một trong những cách được server sử dụng để giao tiếp với trình duyệt và trình thu thập thông tin. Status codes được hiểu đơn giản là các số có 3 chữ số đã được tiêu chuẩn hóa nhằm mang thông tin về page được yêu cầu bởi trình duyệt hoặc trình thu thập thông tin.
401 status code được trả về khi page yêu cầu người dùng phải đăng nhập để xem nội dung của page nhưng họ lại không cung cấp hoặc cung cấp thông tin không hợp lệ.
Nếu nội dung trong page được bảo vệ bằng mật khẩu, Google sẽ không thể thu thập dữ liệu nội dung của page đó. Ở đa số trường hợp, đây là bước quan trọng để page được lập chỉ mục.
HOSTING PREMIUM 4
Bán chạy89,100đ
/ThángHOSTING PREMIUM 5
107,100đ
/ThángHOSTING PREMIUM 6
134,100đ
/ThángHOSTING PREMIUM 7
197,100đ
/ThángHOSTING PREMIUM 8
269,100đ
/ThángHOSTING PREMIUM 9
359,100đ
/ThángHOSTING PREMIUM 10
Siêu tốc494,100đ
/ThángHOSTING PREMIUM 1
35,100đ
/ThángHOSTING PREMIUM 2
53,100đ
/ThángHOSTING PREMIUM 3
- Plugin: Rank Math SEO Pro
- Plugin: Elementor Pro
- Plugin: WPML
- Plugin: WP Smush Pro
- Theme + plugin: MyThemeShop
- Theme: Divi
- Theme: Bricks
Cách khắc phục trạng thái “Blocked due to unauthorized request (401)”
Để tìm và khắc phục những page bị lỗi “Blocked due to unauthorized request (401)”, bạn tiến hành như sau:
Bước 1: Mở Google Search Console. Sau đó, truy cập vào phần báo cáo Page Index từ thanh điều hướng bên trái GSC.
Bước 2: Trên màn hình hiển thị số lượng page bị ảnh hưởng và sự thay đổi của các page đó, cũng như danh sách URL.
Lưu ý: Danh sách này có thể xuất và lọc sang các khu vực quan trọng nhất hoặc có vấn đề cần được xem xét.
Bước 3: Quyết định page nào nên được Google lập chỉ mục và page nào không dựa trên các page trả về 401 status code cho Googlebot.
Có nên lập chỉ mục page bị lỗi “Blocked due to unauthorized request (401)” ?
Không phải tất cả các page trên domain đều được lập chỉ mục. Các website thường rất khó để có thể được mức độ lập chỉ mục 100%. Chính vì vậy mà việc đưa cái gì vào chỉ mục là một quyết định mang tính chiến lược.
Quy tắc này đặc biệt áp dụng cho những page được bảo mật bằng login wall. Tuy nhiên, một trong số trường hợp bạn thực sự muốn page được lập chỉ mục trên Google.
Lúc này, bạn có thể phân biệt các page sử dụng mật khẩu để bảo mật thành 3 loại:
- Các page được bảo vệ nhưng có thể lập chỉ mục
Trong một số trường hợp, page được thiết lập bảo mật bằng mật khẩu nên được lập chỉ mục để hiển thị trong kết quả tìm kiếm và tạo ra các lướt nhấp chuột.
Ví dụ: Bạn có thể vận hành một site tin tức trả phí và vừa đăng tải công khai một bài viết thú vị. Nếu muốn người dùng internet có thể tìm thấy bài viết và mua gói đăng ký để truy cập được toàn bộ nội dung. Lúc này đây, page cần yêu cầu thông tin đăng nhập từ người dùng và được Google lập chỉ mục.
- Các page được bảo vệ nhưng không thể lập chỉ mục
Có một cách xử lý khác đối với các page chứa nội dung không hữu ích cho người truy cập chưa phải là người dùng website. Các page như vậy không cần thiết phải xuất hiện trong Google Search và Google Index.
- Các page mô phỏng
Trường hợp đang làm việc với page mô phỏng, bạn sẽ không muốn những page này trở thành page công khai và xuất hiện trong kết quả tìm kiếm của Google. Tuy nhiên, việc sử dụng trạng thái “Blocked due to unauthorized request (401)” lại không phù hợp để chặn các page này được lập chỉ mục bởi Google Index.
Nguyên nhân là do Google phải tiêu tốn nguồn tài nguyên của mình để thu thập dữ liệu. Chính vì vậy mà Google mới cần phải cẩn thận cho những quyết định về tần suất, số lượng và URL nào nên được thu thập.
Nếu việc quản lý ngân sách thu thập dữ liệu không được tối ưu hóa, các page có giá trị sẽ ít nhận được sự chú ý từ quá trình thu thập dữ liệu của các công cụ tìm kiếm.
Để dễ dàng phân biệt giữa page có thể lập chỉ mục và page không thể lập chỉ mục, bạn có thể lọc các page được đề cập trong sitemap.
Các URL được đưa vào sitemap đều đóng vai trò quan trọng trong chiến lược phát triển website và nên được nằm trong danh sách chỉ mục của Google để tạo lưu lượng truy cập tự nhiên – organic traffic.
Sau khi đã quyết định về vị trí của các page 401, bạn có thể ứng dụng một trong số giải pháp khắc phục được đề cập ở bên dưới:
- Tùy chọn 1: Cho phép Googlebif thu thập dữ liệu các trang
- Tùy chọn 2: Đảm bảo 401 pages không lãng phí ngân sách thu thập dữ liệu
Tùy chọn 1: Cho phép Googlebot thu thập dữ liệu các trang
Đối với các page 401 muốn lập chỉ mục, bạn cần thay đổi thiết lập server để Google có thể truy cập và thu thập dữ liệu các URL này. Điều này đồng nghĩa rằng, server sẽ có cách xử lý Googlebot khác với trình duyệt người dùng.
Thông thường, việc hiển thị nội dung cho Google khác với nội dung người dùng trình duyệt có thể gây ra hình phạt thủ công cho hành vi cloaking. Vì vậy cần phải báo hiệu cho trình thu thập dữ liệu nguyên nhân bạn quyết định chọn giải pháp xử lý này thông qua cách áp dụng dữ liệu có cấu trúc đối với những page tính phí.
Lưu ý: Hướng dẫn của Google có thể chỉ cho bạn dữ liệu có cấu trúc nào cần thêm vào các page đăng ký.
Tùy chọn 2: Đảm bảo 401 pages không lãng phí ngân sách thu thập dữ liệu
Đối với những page 401 không có trong danh sách chỉ mục của Google, bạn nên chặn thu thập dữ liệu các page đó bằng cách sử dụng thêm lệnh trong file robots.txt. File này chứa các lệnh cho phép trình thu thập thông tin biết được những page nào mình có thể truy cập trong website.
Trong trường hợp này, lệnh Disallow thường được sử dụng nhằm mục đích kiểm soát tình trạng lãng phí ngân sách thu thập thông tin của Googlebot trên những page độc quyền, page không thể lập chỉ mục hay page mô phỏng.
Để Googlebot phát hiện các page 401 không muốn lập chỉ mục, bạn tiến hành:
Bước 1: Nhấp vào biểu tượng kính lúp để sử dụng URL Inspection Tool từ danh sách các page bị ảnh hưởng.
Bước 2: Tìm hiểu các liên kết dẫn trình thu thập thông tin đến page 401 cụ thể dựa trên những thông tin được hiển thị trong URL Inspection tool.
Bước 3: Sử dụng trình thu thập thông tin SEO để chỉnh sửa các page đã đề cập ở trên cũng như loại bỏ các liên kết nếu chúng không còn cần thiết và có thể gây ra sự hỗn loạn trên website.
Giải pháp dài hạn
Áp dụng 2 giải pháp trên, các page quan trọng trên website của bạn có thể được lập chỉ mục và cải thiện hiệu quả khả năng phân bổ ngân sách thu thập dữ liệu. Tuy nhiên, nếu trạng thái “Blocked due to unauthorized request (401)” trong Google Search Console hiển thị do lỗi trên server thì các giải pháp này không thể đảm bảo 100% các sự cố lập chỉ mục sẽ không quay trở lại trong tương lai.
Tương tự các website khác hiện nay, domain có thể hưởng lợi từ việc thường xuyên đánh giá technical SEO. Bởi, việc làm này giúp loại bỏ các mối đe dọa lên khả năng hiển thị của website trên công cụ tìm kiếm trước khi xảy ra bất kỳ thiệt hại nào.
Cùng tham khảo thêm một số bài viết liên quan về cách sửa lỗi trong GSC có thể bạn quan tâm:
📌 Cách sửa lỗi Redirect error trong Google Search Console
📌 Cách sử dụng công cụ xóa URL trong GSC đơn giản nhất
📌 Sửa lỗi Crawled – Currently Not Indexed trong Google Search Console
Lời kết
Trên đây là những thông tin chia sẻ về nguyên nhân và cách khắc phục lỗi “Blocked due to unauthorized request (401)” trong Google Search Console. Hy vọng bài viết sẽ giúp bạn hiểu rõ hơn và giải quyết thành công những tình trạng lỗi khiến page không thể lập chỉ mục và hiển thị trên Google.
Hoàng Vui
Tôi là Hoàng Vui - SEO Analyst tại Vietnix với hơn 3 năm kinh nghiệm trong lĩnh vực SEO và Google Marketing. Trước đó, tôi đã SEO nhiều dự án lớn, nhỏ giúp cải thiện thứ hạng từ khoá và traffic cho các khách hàng cá nhân, doanh nghiệp và tạo ra chuyển đổi. Tôi hy vọng rằng kiến thức mà tôi chia sẻ sẽ mang lại nhiều giá trị hữu ích và góp phần thúc đẩy sự thành công cho doanh nghiệp của bạn.
Bình luận
Bài viết mới nhất
Chỉ số tăng trưởng
Điểm Desktop
100 (+39)
Điểm Mobile
100 (+67)
Core Web Vitals
Passed
Lĩnh vực
Ecommerce
Chỉ số tăng trưởng
Điểm Desktop
99 (+28)
Điểm Mobile
100 (+50)
Core Web Vitals
Passed
Lĩnh vực
SEO
Chỉ số tăng trưởng
Điểm Desktop
99 (+26)
Điểm Mobile
98 (+59)
Core Web Vitals
Passed
Lĩnh vực
Ecommerce
Chỉ số tăng trưởng
Điểm Desktop
100 (+8)
Điểm Mobile
98 (+35)
Core Web Vitals
Passed
Lĩnh vực
Giáo Dục
Chỉ số tăng trưởng
Điểm Desktop
100 (+61)
Điểm Mobile
100 (+61)
Core Web Vitals
Passed
Lĩnh vực
Giáo Dục
25 Tháng 2 lúc 21:09
·
5 Tháng 3 lúc 16:21
·
5 Tháng 3 lúc 15:43
·
29 Tháng 2 lúc 17:04
·
30 Tháng 1 lúc 19:09
·
[Đỉnh]
Em có dùng hosting, vps, cloud vps, cloud server, dedicated server của rất nhiều bên từ trong nước đến nước ngoài để hosting khoảng 2,000+ domain. Mỗi bên đều có ưu nhược khác nhau, nhưng có 1 số bên đặc biệt “bá đạo”, trong đó có: Vietnix!!!!
Lần đầu tiên em được cả CEO Hưng Nguyễn lẫn Master về dev Vietnix Trung của 1 đơn vị hàng đầu liên quan đến Hosting, Server support từ A – Z (từ Zalo, Tele, đến FB và cả Phone)
Em có khá nhiều web dạng Big Data (bài, ảnh, database, data) lên đến hàng trăm Gb. Càng to thì nó càng có nhiều vấn đề về phần phản hồi ban đầu (nhược điểm cố hữu của php wordpress so với nativejs, reactjs, html, headless,…), và anh em Vietnix có nhã ý hỗ trợ xử lý phần Speed Insight này.
Kết quả thực sự kinh ngạc, từ cách trao đổi đến xử lý vấn đề, cut off những cái cần cut off, xử lý rất sâu vấn đề và gợi ý rất nhiều ý tưởng optimize hệ thống!!!! Thực sự quá hài lòng về kết quả cũng như cách tương tác của các đầu tầu bên Vietnix ^^!!!
Nhân cơ duyên được kết nối với những cao thủ của Vietnix, em xin chia sẻ và lan tỏa để nhiều anh em có cơ hội được sử dụng những dịch vụ tốt nhất với giá vô cùng hợp lý!!!!
1 – Với anh em chưa có hosting, em đặc biệt recommend sử dụng hosting bên Vietnix:
– Sử dụng mã DUNGCAXINH_PAGESPEED sẽ được giảm 20% trọn đời (lifetime luôn)
– Áp dụng các gói Hosting Business, Hosting wordpress và reg 1 năm trở lên
– Anh em chưa biết cách reg thì còm men hoặc ib để em hướng dẫn hoặc nhờ các bạn bên Vietnix support từ A – Z
2 – Anh em có hosting rồi và muốn build blog hoặc web = wordpress mà chưa có giao diện thì nhân tiện em đang có tài khoản Premium bên Envato, em sẽ tặng bất kỳ giao diện nào có trên Envato Themes (Link em để dưới còm men) ạ. Cả nhà còm hoặc ib em Themes mà mọi người “chim ưng”, em sẽ cho anh em tải về, up drive và gửi ạ!!! (Chương trình này kéo dài đến ngày 29 tết âm lịch ạ)
3 – BEST NHẤT luôn!!!! Anh em nào mua hosting dùng mã DUNGCAXINH_PAGESPEED sẽ được tối ưu 100 điểm tốc độ cho 1 web (đây là ưu đãi riêng của CEO Hưng Nguyễn dành cho bạn bè của #dungcaxinh ^^) (Giá trị nhất là cái vụ số 3 này anh chị em nhé ^^), cơ hội vàng để move về đơn vị hosting uy tín là đây ^^!!!!
Một lần nữa xin chân thành cám ơn 2 đồng chí em: Hưng Nguyễn và Vietnix Trung đã giải được một bài toán khó cho các trang WP Big data mà anh loay hoay bao lâu nay chưa tìm ra đáp án!!! Chúc Vietnix ngày càng phát triển và có một năm 2024 đại đại thắng nhé ^^ !!!!!
#SEO #Vietnix #dungcaxinh
2 Tháng 2 lúc 21:06
·
UY TÍN – TẬN TÂM – TỐC ĐỘ
3 từ trên là vẫn chưa đủ để nói về quy trình làm việc cực chuyên nghiệp của team Vietnix.Chuyện là mình có con website chính đang có lượt truy cập organic hàng ngày cũng tương đối (hình 1)
Vấn đề là, con site này đang nằm trên hosting dùng chung nên tốc độ load chưa nhanh, tốc độ load chưa nhanh thì trải nghiệm visitor chưa tốt, trải nghiệm visitor chưa tốt thì tỷ lệ chuyển đổi ra đơn hàng kiểu gì thì kiểu cũng sẽ bị ảnh hưởng.
Biết rõ là đang mất tiền nhưng không biết xử lý như lào, nghĩ mà cay.
Đang loay hoay thì vận may nó tới, hôm qua đang lướt phở bò thấy a Nguyễn Việt Dũng đăng bài, rảnh nên thả cái comment hóng hớt, ai ngờ ngoằng phát thấy ông Dũng tạo nhóm với Vietnix Trung luôn.
Ae Vietnix thì siêu tốc độ, lập tức lấy thông tin vào việc, không hỏi han lằng nhằng, không kỳ kèo chốt đơn dù lúc đấy cũng đang đêm muộn.
Sáng hôm sau dậy vẫn còn đang lơ ngơ mở điện thoại check tin nhắn thì đã thấy ae Vietnix báo xong việc, trong khi mình vẫn chưa biết có chuyện gì xảy ra @@.
Được cái bấm thử website thì thấy load siêu nhanh, chưa tới một giây là thông tin các thứ hiện hết. Quá phê, thả con ảnh trước sau (hình 2,3) để ace tiện đối chiếu nhé. Thế này thì mình gửi gắm nốt 15 em website còn lại cho team Vietnix thôi chứ không cần nghĩ ngợi gì nữa. 10/10.
Nên là:
- Anh chị em muốn có một con website tốc độ load nhanh như tốc độ trở mặt của nyc – Dùng ngay dịch vụ hosting của Vietnix
- Anh chị em có website rồi muốn tìm bên hosting uy tín, chuyên nghiệp hỗ trợ không quản ngày đêm – Liên hệ ngay Vietnix Trung
- Anh chị em quan tâm đến trải nghiệm khách hàng, từ những cái nhỏ nhất như tăng tốc độ website – Better call Vietnix Trung
Và đừng quên dùng pass “HIEUAI_PAGESPEED” để được giảm 20% trọn đời hosting business và wp hosting, quả code này còn được tặng 1 lần tối ưu pagespeed nữa nhé, ưu đãi chắc cũng phải nhất nhì thị trường luôn.
#SEO #Vietnix #hieuai
Chỉ số tăng trưởng
Điểm Desktop
100 (+43)
Điểm Mobile
100 (+74)
Core Web Vitals
Passed
Lĩnh vực
AI