Hướng dẫn cài đặt và sử dụng Screaming Frog Từ A–Z Cho SEO Website
Các chuyên gia SEO sử dụng các công cụ khác nhau để đảm bảo rằng các bot của công cụ tìm kiếm có thể thu thập thông tin và index các trang web. Screaming Frog là một trong những công cụ này, đó là trình thu thập thông tin web giúp bạn kiểm tra trang web của mình và cung cấp cho bạn thông tin chi tiết về hiệu suất của nó.
Phần mềm có thể khó sử dụng nếu bạn mới bắt đầu, nhưng đừng lo lắng. Hướng dẫn chuyên sâu về Screaming Frog của SEO PLUS sẽ giúp bạn khám phá và sử dụng công cụ hiệu quả cho mình.
Nội dung chính
Screaming Frog là gì?
Screaming Frog hoạt động giống như trình thu thập thông tin của Google: nó cho phép bạn thu thập dữ liệu bất kỳ trang web nào, bao gồm cả các website thương mại điện tử. Nhưng công cụ SEO spider này sẽ thu thập thông tin bằng cách cung cấp cho bạn dữ liệu tại chỗ có liên quan và tạo ra các số liệu thống kê và báo cáo có thể tiêu hóa được. Với dữ liệu trang web đơn giản hơn từ Screaming Frog, bạn có thể dễ dàng xem trang web của mình cần hoạt động trên những lĩnh vực nào.
Phần mềm Screaming Frog có thể giúp bạn thực hiện các tác vụ sau cho nỗ lực SEO của bạn:
- Tìm kiếm liên kết bị hỏng
- Tìm kiếm lỗi redirect 301 tạm thời và vĩnh viễn
- Phân tích siêu dữ liệu
- Tìm kiếm nội dung trùng lặp
- Xem lại tệp robots.txt và các lệnh khác
- Tạo sitemap cho website
- Phân tích cấu trúc website
Và tất nhiên, bạn có thể làm được nhiều hơn thế với Screaming Frog. Chúng tôi sẽ đề cập đến các tính năng bổ sung này trong phần khác.
Vì sao SEOer cần dùng Screaming Frog?
Nếu website có vài chục trang, bạn vẫn có thể kiểm tra thủ công.
Nhưng với website:
- 500 URL
- 5.000 URL
- 50.000 URL
Thì gần như không thể.
Screaming Frog giúp:
Tiết kiệm thời gian
Thay vì mở từng trang để kiểm tra:
- title
- heading
- status code
- liên kết
Phần mềm sẽ quét toàn bộ tự động.
Phát hiện lỗi kỹ thuật nhanh
Ví dụ:
- lỗi 404
- chuyển hướng 302
- redirect chain
- canonical sai
- trang orphan
- thiếu meta
Hiểu cách Google thu thập dữ liệu website
Đây là phần cực kỳ quan trọng trong SEO Technical.
Phiên bản miễn phí và trả phí
Screaming Frog hiện có 2 phiên bản:
Bản miễn phí
Giới hạn:
- Crawl tối đa 500 URL
- Không tích hợp nhiều tính năng nâng cao
- Hạn chế API
Phù hợp:
- Website nhỏ
- Blog cá nhân
- Người mới học SEO
Bản trả phí
Cho phép:
- Crawl không giới hạn
- Kết nối GA4
- Google Search Console
- Ahrefs
- PageSpeed Insights
- Tự động hóa SEO Audit
Nếu làm SEO chuyên nghiệp, đây là khoản đầu tư rất đáng giá.
Cách cài đặt Screaming Frog:
Tải Screaming Frog trên hệ điều hành Window
- Link tải: https://www.screamingfrog.co.uk/seo-spider/
- Tìm trình cài đặt Screaming Frog trong thư mục Tải xuống của bạn.
- Bấm đúp vào trình cài đặt.
- Nhấp vào “Có” trên màn hình Kiểm soát Tài khoản Người dùng để tiếp tục cài đặt phần mềm.
- Chọn kiểu cài đặt của bạn, sau đó nhấp vào nút “Cài đặt”.
- Sau khi cài đặt xong phần mềm, hãy nhấp vào “Đóng”.
Tải Screaming Frog trên MacOS
- Chuyển đến thư mục Tải xuống trong Trình tìm kiếm.
- Bấm đúp vào trình cài đặt.
- Sau đó, một cửa sổ mới với biểu tượng của phần mềm và thư mục Ứng dụng sẽ xuất hiện trên màn hình của bạn. Nhấp vào biểu tượng Screaming Frog và kéo nó vào thư mục Ứng dụng.
- Đóng cửa sổ.
- Vào Finder và tìm “ScreamingFrogSEOSpider” trong danh sách thiết bị.
- Nhấp vào biểu tượng đẩy ra bên cạnh tên trình cài đặt để kết thúc quá trình cài đặt.
Tải Screaming Frog trên hệ điều hành Linux
Bạn có thể sử dụng giao diện người dùng Ubuntu hoặc chức năng dòng lệnh để cài đặt Screaming Frog trên máy tính của mình.
Giao diện người dùng Ubuntu
- Bấm đúp vào tệp .deb của phần mềm.
- Chọn “Cài đặt”, sau đó nhập mật khẩu của bạn.
- Chấp nhận giấy phép ttf-mscorefonts-installer trước khi cài đặt Screaming Frog.
- Chờ khi máy tính của bạn cài đặt xong phần mềm.
Dòng lệnh
- Nhập lệnh sau vào một cửa sổ đầu cuối đang mở:
- Nhập mật khẩu của bạn.
Nhập Y để tiếp tục cài đặt phần mềm và chấp nhận Thỏa thuận cấp phép người dùng cuối ttf-mscorefonts-installer (EULA).
Hãy nhớ rằng bạn đang cài đặt phiên bản Screaming Frog miễn phí. Phiên bản miễn phí cho phép bạn thu thập dữ liệu tối đa 500 URL và bạn sẽ cần giấy phép để thu thập dữ liệu các trang web khác. Bạn có thể mua giấy phép phần mềm trên trang web Screaming Frog.
Để bắt đầu sử dụng phiên bản cao cấp của Screaming Frog, hãy chuyển đến menu License. Nhấp vào tùy chọn “Enter License” và nhập key của bạn. Bạn sẽ thấy một hộp thoại hiển thị hiệu lực của giấy phép và ngày hết hạn của nó.
Screaming Frog có những tính năng gì?
Configuration
Nếu bạn đang cài đặt thu thập thông tin tùy chỉnh, menu Configuration của Screaming Frog cho phép bạn đặt và điều chỉnh các tùy chọn đó. Bạn có thể sử dụng các tùy chọn bên dưới để tùy chỉnh cài đặt thu thập thông tin của mình.
- Spider: Với tùy chọn Spider, bạn có thể chọn nội dung để thu thập thông tin và dữ liệu để báo cáo.
- Include & Exclude: Tùy chọn này cho phép bạn bao gồm và loại trừ các URL cụ thể trong quá trình thu thập thông tin.
- API Access: Chọn tùy chọn này để tích hợp Google Analytics hoặc Google Search Console vào thu thập thông tin trang web.
Reports
Menu Báo cáo tạo tổng quan thu thập thông tin có thể tải xuống và báo cáo dữ liệu tại chỗ. Bạn có thể sử dụng các báo cáo này trong các cuộc kiểm tra SEO của mình.
Sitemaps
Với menu này, bạn có thể tạo sơ đồ trang web của mình. Bạn sẽ tìm hiểu thêm về cách tạo sơ đồ trang trong phần sau của hướng dẫn SEO Screaming Frog này.
Thiết lập bộ nhớ
Thu thập thông tin trang web áp dụng cho các trang web lớn và nhỏ. Nhưng việc thu thập dữ liệu các trang web lớn hơn sẽ tiêu tốn nhiều bộ nhớ và sức mạnh xử lý hơn. Với Screaming Frog, bạn có thể phân bổ một lượng bộ nhớ nhất định của thiết bị để thu thập dữ liệu các trang web. Phần mềm có cơ sở dữ liệu và các chế độ lưu trữ RAM cho mục đích này.
Configuration settings
Screaming Frog đã tuân theo các cài đặt mặc định để thu thập thông tin trang web. Nhưng bạn có thể điều chỉnh các cài đặt này và thu thập dữ liệu cụ thể bằng nhiều công cụ của phần mềm. Bằng cách sử dụng các công cụ này, việc thu thập thông tin của bạn sẽ tốn ít thời gian và sức mạnh xử lý hơn. Bạn có thể tùy chỉnh cài đặt của mình từ menu Configuration.
Cách sử dụng Screaming Frog
Cách dùng Screaming Frog SEO Spider để thu thập thông tin website
- Nhấp vào menu Configuration, sau đó chọn tùy chọn Spider.
- Chọn tùy chọn “Crawl all subdomains” (Thu thập thông tin tất cả các miền phụ). Bạn cũng có thể chọn bất kỳ tùy chọn nào khác nếu bạn đang thu thập dữ liệu phương tiện hoặc tập lệnh.
- Bắt đầu thu thập thông tin và đợi cho đến khi hoàn tất.
- Khi phần mềm kết thúc thu thập thông tin, hãy nhấp vào tab Internal.
- Lọc kết quả của bạn theo HTML, sau đó xuất dữ liệu.
Cách dùng Screaming Frog để audit
- Chọn “Crawl all subdomains” trong menu cấu hình Spider. Bạn có thể bỏ chọn CSS, hình ảnh, Javascript, Flash, bất kỳ tùy chọn không liên quan nào khác.
- Nếu bạn đang thu thập các liên kết nofollow, hãy chọn các hộp tương ứng cho phù hợp.
- Bắt đầu thu thập thông tin của bạn và đợi nó kết thúc.
- Xuất kết quả của bạn sang tệp CSV bằng cách nhấp vào trình đơn Báo cáo nâng cao, sau đó nhấp vào tùy chọn “All Links” (Tất cả các liên kết).
Hướng dẫn tạo sitemap.xml với phần mềm crawl dữ liệu Screaming Frog
- Tiến hành thu thập thông tin đầy đủ về trang web và các miền phụ của bạn.
- Chọn menu Xuất nâng cao, sau đó nhấp vào “XML Sitemap”. Tùy chọn biến sơ đồ trang web của bạn thành một bảng Excel có thể chỉnh sửa.
- Khi tệp được mở, hãy nhấp vào tùy chọn “read online”.
- Sau đó, nhấp vào tùy chọn “open as an XML table”. Giờ đây, bạn có thể chỉnh sửa sơ đồ trang web của mình trực tuyến, lưu nó ở định dạng XML và tải nó lên Google.
Hướng dẫn crawl website lần đầu
Ví dụ bạn muốn quét website:
https://domain.com
Thực hiện:
Bước 1:
Nhập URL vào thanh Address
Bước 2:
Nhấn Start
Phần mềm sẽ bắt đầu crawl.
Bạn sẽ thấy:
- số URL đang quét
- thời gian
- dung lượng
- trạng thái
Sau vài phút sẽ hoàn tất.
Kiểm tra lỗi 404 bằng Screaming Frog
Broken link ảnh hưởng rất lớn đến SEO và trải nghiệm người dùng.
Thực hiện:
Response Codes → Client Error (4XX)
Lúc này bạn sẽ thấy:
- URL lỗi
- mã lỗi
- nguồn liên kết
Ví dụ:
https://domain.com/seo-abc
404
Để xem trang nào đang trỏ tới URL lỗi:
Chọn URL lỗi
Mở tab:
Inlinks
Bạn sẽ thấy nơi chứa liên kết gãy.
Tiến hành:
- sửa link
- redirect
- cập nhật URL
Kiểm tra Redirect
Chuyển hướng sai là lỗi nhiều website gặp phải.
Chọn:
Response Codes
Lọc:
Redirection (3XX)
Bạn sẽ thấy:
301
302
307
Nên ưu tiên:
301
Hạn chế:
302
Vì 302 là redirect tạm thời.
Kiểm tra Redirect Chain
Ví dụ:
Trang A → B → C
Google phải đi nhiều bước trước khi đến URL cuối.
Điều này làm:
- giảm tốc độ crawl
- thất thoát sức mạnh SEO
Vào:
Reports → Redirect Chains
Xuất file:
Redirect Chains Report
Tiến hành sửa:
A → C trực tiếp
Kiểm tra Title SEO
Title cực kỳ quan trọng vì ảnh hưởng CTR và xếp hạng.
Chọn:
Page Titles
Bạn sẽ thấy:
- tiêu đề
- độ dài
- số ký tự
Các lỗi thường gặp:
Missing
Duplicate
Over 60 characters
Below 30 characters
Ví dụ xấu:
“Dịch vụ”
Ví dụ tốt:
“Dịch vụ SEO Website Tổng Thể Uy Tín Tại Hà Nội”
Kiểm tra Meta Description
Chọn:
Meta Description
Lọc:
Missing
Duplicate
Over 155 characters
Meta tốt nên:
- khoảng 140–155 ký tự
- chứa từ khóa
- có CTA
Ví dụ:
“Tìm hiểu dịch vụ SEO tổng thể giúp tăng thứ hạng Google và thu hút khách hàng tiềm năng.”
Kiểm tra Heading H1
Chọn:
H1
Các lỗi phổ biến:
- thiếu H1
- nhiều H1
- trùng lặp
Mỗi trang chỉ nên có:
1 H1 duy nhất
Ví dụ:
H1 đúng:
“Hướng dẫn SEO Website”
Sai:
“Hướng dẫn SEO Website”
“Dịch vụ SEO”
cùng xuất hiện trên một trang.
Kiểm tra H2
H2 giúp Google hiểu cấu trúc nội dung.
Chọn:
H2
Kiểm tra:
- trùng lặp
- thiếu H2
- cấu trúc không logic
Nên dùng H2 để chia ý chính.
Kiểm tra Canonical
Canonical giúp tránh trùng lặp nội dung.
Chọn:
Canonicals
Lỗi thường gặp:
- canonical trỏ sai
- canonical trỏ redirect
- canonical trống
Ví dụ:
Sai:
domain.com/page-a
canonical → page-b
Nếu không có chủ đích sẽ gây mất index.
Kiểm tra hình ảnh quá nặng
Vào:
Images
Lọc:
Over 100 KB
Ảnh quá lớn sẽ:
- giảm tốc độ
- tăng Core Web Vitals xấu
Nên:
- dùng WebP
- nén ảnh
- lazy load
Kiểm tra Internal Link
Internal Link giúp phân phối sức mạnh SEO.
Chọn:
Internal
Sau đó:
URL → Inlinks
Bạn sẽ thấy:
- trang nào đang trỏ tới URL
- anchor text
- vị trí
Mục tiêu:
Trang quan trọng nhận nhiều liên kết nội bộ.
Cách tìm trang mồ côi (Orphan Page)
Trang mồ côi là trang không có internal link.
Google rất khó tìm thấy.
Kết nối:
Google Search Console
Vào:
Configuration → API Access
Kết nối GSC
Sau đó:
Crawl Analysis → Configure
Tích hợp dữ liệu.
Các trang không có liên kết nội bộ sẽ được hiển thị.
Hướng dẫn dùng XML Sitemap
Nếu website lớn:
10.000 URL
50.000 URL
Không nên crawl toàn site.
Chọn:
Mode → List
Nhập:
https://domain.com/sitemap.xml
Phần mềm chỉ quét URL trong sitemap.
Tiết kiệm tài nguyên cực nhiều.
Hướng dẫn dùng Include và Exclude
Ví dụ chỉ muốn crawl blog:
Vào:
Configuration → Include
Nhập:
/blog/
Hoặc loại bỏ:
/tag/
/author/
Rất hữu ích với website WordPress.
Tối ưu Screaming Frog cho website lớn
Nếu website quá lớn:
100.000 URL
Hãy:
Tắt:
Configuration → Spider
Bỏ:
☐ Images
☐ CSS
☐ JavaScript
Việc này giúp:
- giảm RAM
- tăng tốc độ
- tránh vượt giới hạn
Mẹo sử dụng Screaming Frog nâng cao
Kết nối Google Analytics
Cho phép xem:
- traffic
- bounce rate
- conversion
Kết hợp dữ liệu SEO kỹ thuật với hành vi người dùng.
Kết nối Ahrefs
Xem:
- backlink
- DR
- UR
Từ đó ưu tiên URL quan trọng.
Tích hợp PageSpeed
Kiểm tra:
- Core Web Vitals
- tốc độ tải
Ngay trong Screaming Frog.
Sai lầm phổ biến khi dùng Screaming Frog
Crawl toàn bộ website quá lớn
Có thể khiến máy treo.
Không dùng sitemap
Làm mất thời gian.
Không lọc URL rác
Ví dụ:
- tag
- search
- pagination
Chỉ xem lỗi 404
Trong khi redirect, canonical và internal link cũng cực kỳ quan trọng.
So sánh Screaming Frog bản free và bản trả phí
Sử dụng Screaming Frog SEO tool miễn phí
Bạn có thể sử dụng công cụ này miễn phí, nhưng các tính năng của nó sẽ bị hạn chế. Với phiên bản miễn phí, bạn sẽ nhận được các tính năng như:
| Screaming Frog Free | Screaming Frog Pro |
| Tìm kiếm các liên kết bị hỏng hoặc chuyển hướng. | Tất cả các tính năng của phiên bản miễn phí |
| Phân tích tiêu đề trang và thẻ meta. | Lập kế hoạch |
| Kiểm tra Meta Robot và Index | Thu thập thông tin cấu hình |
| Kiểm toán hreflang | Lưu, thu thập thông tin và tải lên |
| Kiểm tra các trang trùng lặp | Hiển thị JavaScript |
| Tạo sitemap XML | Thu thập và xác thực AMP |
| Trang web trực quan | Robot.txt tùy chỉnh |
| Giới hạn có thể quét: 500 URL. | Dữ liệu có cấu trúc & Xác thực |
| Tìm kiếm mã nguồn tùy chỉnh | |
| Khai thác tùy chỉnh | |
| Tích hợp Google Analytics | |
| Bảng tìm kiếm tích hợp | |
| Bảng tìm kiếm tích hợp | |
| Tích hợp PageSpeed Insights | |
| Liên kết số liệu tích hợp | |
| Xác thực dựa trên biểu mẫu | |
| Hỗ trợ kỹ thuật miễn phí | |
| Lưu trữ và xem HTML thô và kết xuất | |
| Không giới hạn số URL có thể quét |
Screaming Frog có phiên bản trả phí với chi phí là 149,00 bảng Anh / năm (tương đương khoảng 3.843.400 đồng / năm). Screaming Frog SEO Spider có rất nhiều tính năng khác mà bạn có thể tìm hiểu thêm. Thậm chí có thể kết nối Screaming Frogs với Google Analytics và Google Search Console để có dữ liệu phân tích chuyên sâu hơn nữa.
Chia sẻ key Screaming frog full (sưu tầm)
User: Team NGEN
Key: AEA1351675-1668085431-6747BC14DE
——
User: VanAnhTo
Key: 5974E48DFF-1638269235-69C7FBB0E7
——
User: dichvuseosona
Key: 7C306EB909-1671190942-21B4737732
Kết luận:
Với những thông tin trên, chúng tôi đã giúp bạn đã làm quen quen với Screaming Frog và có thể sử dụng những tính năng tuyệt vời của tool crawl dữ liệu từ các website này. Đây là một công cụ SEO rất hữu ích giúp bạn kiểm tra và tối ưu hóa trang web của mình.
Nếu bạn đang tìm kiếm một giải pháp SEO từ khóa, SEO tổng thể mang lại hiệu quả nhanh và bền vững, hãy liên hệ SEO PLUS qua hotline 0868 913 668 để được tư vấn chi tiết.
Các dịch vụ của SEO PLUS:
