Các công cụ social listening thu thập dữ liệu như thế nào?

Đây là một trong series các bài viết cho thấy bức tranh thực sự về cách hoạt động thu thập dữ liệu của các công cụ lắng nghe và theo dõi mạng xã hội, đặc biệt là Buzzmetrics, một công cụ đang được dùng để theo dõi các chiến dịch và thương hiệu.

Đây là một trong series các bài viết cho thấy bức tranh thực sự về cách hoạt động thu thập dữ liệu của các công cụ lắng nghe và theo dõi mạng xã hội, đặc biệt là Buzzmetrics, một công cụ đang được dùng để theo dõi các chiến dịch và thương hiệu quản lý bởi các tập đoàn lớn Samsung, Coca-Cola, Unilever và các Agencies global như Ogilvy, Maxus, Leo Burnett, Phibious, Performics... tại Việt Nam. Social Listening là một mô hình kinh doanh biến thể của ngành nghiên cứu thị trường. Và cũng giống như các quy trình nghiên cứu thị trường truyền thống, social media research cũng phải trải qua 5 giai đoạn:1. Thu thập dữ liệu2. Lấy mẫu3. Phân loại dữ liệu4. Phân tích dữ liệu5. Trình bày báo cáo nghiên cứuThu thập dữ liệu là bước đầu tiên trong quá trình thực hiện nghiên cứu trên social media. Các công cụ social listening sẽ phải xây dựng một tổ hợp dữ liệu cho mỗi nước mà mình nghiên cứu (panel) và việc này có thể mất vài tháng đến nhiều năm. Đồng thời cho mỗi chiến dịch, các agency sẽ yêu cầu bổ sung các kênh được dùng cho chiến dịch đó như microsite, fanpage mới mà công cụ social listening sẽ phải đáp ứng. Việc thu thập dữ liệu toàn bộ thị trường là cần thiết và cho phép nhà nghiên cứu cho ra các nghiên cứu về xu hướng và ngành hàng.Hiện nay có 2 phương pháp chính để thu thập dữ liệu: Từ khóa (Keywords) và Trang (Sites).THU THẬP DỮ LIỆU BẰNG KEYWORDSPhương pháp này được áp dụng đối với các global social networks như Facebook, Google Plus, Youtube, Twitter , Instagram… trong đó các công cụ social listening sẽ kết nối với các API (Application Programming Interface - Giao diện lập trình ứng dụng) của các social networks và yêu cầu cho phép lấy những dữ liệu có chứa keywords.

  • Ưu điểm: cho phép lấy dữ liệu của toàn bộ social network, bao gồm các trang cá nhân
  • Nhược điểm:

Tương tự như công cụ search hashtags của facebook, việc lấy data bằng API phụ thuộc sự hạn chế của các social networks. API không ổn định và có thể thay đổi dẫn đến việc dữ liệu được trả lại bới API có thể không đầy đủ và không nhất quán theo thời gian. Hiện tại không có một thống kê rõ ràng việc lấy dữ liệu bằng API có thể lấy được bao nhiêu % thảo luận.THU THẬP DỮ LIỆU THEO SITESLà việc thu thập dữ liệu theo trang (page) trong đó các trang có dữ liệu muốn thu thập phải được liệt kê trong hệ thống. Phương pháp này giúp thu thập toàn bộ dữ liệu của các kênh được bao phủ. Hệ thống sẽ truy cập vào các website cần thu thập, click vào các đường link bài viết, tìm đọc bài viết và ghi nhận lại những thông tin có giá trị nghiên cứu một cách hiệu quả mà không làm ảnh hưởng tới các website đang thu thập.

thu thập dữ liệu _ScreenHunter_0011_2
thu thập dữ liệu _2
thu thập dữ liệu _ScreenHunter_0032_3

Với phương pháp thu thập dữ liệu bằng sites, hệ thống thực hiện các thao tác như một người dùng (user) khi truy cập vào trang cần thu thập. Sau khi click vào Thread, hệ thống sẽ sao chép toàn bộ nội dung hiển thị trên màn hình bao gồm Title, Replies, Authors, URL,… Sau đó hệ thống sẽ quay lại mỗi trang sớm nhất có thể để tìm ra thread mới và replies mới cho thread cũ.Mỗi replies sẽ được tính là 1 mention và mỗi thread cũng được tính là 1 mention. Do đó, một thread có 100 replies sẽ được tính là 101 mentions, hay 101 ý kiến người tiêu dùng.

  • Ưu điểm: Cho phép đảm bảo 100% toàn bộ dữ liệu trong trang
  • Nhược điểm: Việc lấy dữ liệu theo trang có thể dẫn đến tình trạng thiếu dữ liệu tạm thời vì các lý do sau:

- Cấu trúc site thay đổi- Site blocking: việc thu thập dữ liệu tự động nếu lạm dụng tài nguyên của các website  sẽ bị chặn bởi admin- Site down: Không thể truy cập để thu thập dữ liệu khi trang đang bảo trì hoặc xảy ra vấn đề- Các vấn đề đến từ đường truyền internetĐể xây dựng danh sách tất cả các trang forums, báo điện tử và fanpages ở Việt Nam là một quá trình dài. Vì thế các công cụ social listening nước ngoài thường bị thiếu dữ liệu do việc thu thập danh sách sites không đủ, hoặc khi gặp một trong các vấn đề trên thì không có nhân sự để giải quyết ngay tức thì.Trong quá trình đảm bảo đầy đủ dữ liệu cho các chiến dịch và thương hiệu các công cụ social listening như Buzzmetrics phải sử dụng một bộ phận nhân lực áp dụng nhiều phương pháp hỗ trợ bởi máy tính để kiểm tra xem dữ liệu trên các kênh quan trọng có được thu thập đủ hay không. Đây là sự khác biệt giữa các công cụ miễn phí và giải pháp social listening trọn gói, đó là sự đảm bảo đầy đủ dữ liệu cho khách hàng.Công nghệ social listening cũng như công nghệ search engine, đó là mô hình tổng hợp dữ liệu thị trường. Một công cụ social listening phải lưu trữ dữ liệu tối thiểu 2 năm để phục vụ các mục đích nghiên cứu. Áp lực lưu trữ và xử lý dữ liệu cũng tăng theo thời gian vì thế khoản đầu tư vào hệ thống cơ sở hạ tầng phần cứng cũng là rất lớn và liên tục.

Thông tin bài viết

Đừng bỏ lỡ bất kỳ insight nào!

Nhận cập nhật về các nghiên cứu mạng xã hội hữu ích

Đăng ký ngay

Bài viết liên quan

Tổng Kết Mạng Xã Hội Nửa Đầu 2024 Dưới Góc Nhìn Social Listening

Thông qua lắng nghe mạng xã hội sáu tháng đầu năm 2024, Buzzmetrics ghi nhận lượng lớn thảo luận đối với đa dạng chủ đề cả trong và ngoài nước.

Đọc bài viết
right
Cuộc Cạnh Tranh Gay Cấn Trên Mạng Xã Hội Giữa Các Chuỗi Coffee Shop Tại Việt Nam: Starbucks và Highlands Coffee Chiếm Sóng

Ở Việt Nam, thị trường cà phê đang phát triển mạnh mẽ với sự cạnh tranh giữa các chuỗi cửa hàng nổi tiếng như Starbucks, Highlands Coffee và Phúc Long. Nhu cầu của người tiêu dùng không chỉ dừng lại ở chất lượng đồ uống mà còn mở rộng đến trải nghiệm từ thế giới online đến offline.

Đọc bài viết
right
Tổng Hợp Chủ Đề Thảo Luận Giáng Sinh 2023: Cách Mạng Xã Hội “Tạo Nên” Mùa Lễ

Giáng sinh không chỉ là dịp kỷ niệm tôn giáo quan trọng, mà còn là thời điểm mọi người tận hưởng niềm vui bên gia đình và bạn bè. Đối với doanh nghiệp, đây là cơ hội tuyệt vời để kích thích tiêu dùng thông qua chiến lược truyền thông sáng tạo.

Đọc bài viết
right
Gen Alpha - Thế hệ người tiêu dùng tương lai có gì khác biệt?

Gen Alpha được dự đoán sẽ sớm trở thành nhóm tiêu dùng chủ chốt, mang đến nhiều thay đổi cho nền kinh tế của nền kinh tế và là nhóm đối tượng mục tiêu đầy triển vọng của các thương hiệu

Đọc bài viết
right
Nhìn Lại 2023, Dự Đoán Xu Hướng Marketing Trực Tuyến Nổi Bật Trong Năm 2024

Năm 2023 đã đánh dấu một thời kỳ đầy biến động về kinh tế, đặt ra một loạt thách thức đối với các doanh nghiệp trong việc duy trì và phát triển. Trong bối cảnh khó khăn này, việc sử dụng mạng xã hội như một công cụ quan trọng trong chiến lược marketing đã trở nên cần thiết hơn bao giờ hết. Điều này không chỉ đòi hỏi các doanh nghiệp phải thích nghi nhanh chóng với sự thay đổi, mà còn đặt ra câu hỏi quan trọng: Làm thế nào để đạt được hiệu quả thực sự từ việc sử dụng mạng xã hội trong chiến lược marketing của mình và đón đầu xu hướng marketing 2024?

Đọc bài viết
right
Social Listening là gì và có vai trò như thế nào với Social Media Marketing?

Social Listening là một dạng nghiên cứu thị trường dựa trên thảo luận của các nền tảng mạng xã hội, giúp phân tích sức khỏe thương hiệu, chiến dịch, dịp đặc biệt,...

Đọc bài viết
right
Ecommerce Audit và Retail Audit liên hệ với nhau như thế nào?

Retail Audit là một công cụ nghiên cứu khá quen thuộc với các thương hiệu, được sử dụng để đo lường hiệu quả bán hàng trong môi trường bán lẻ. Tuy nhiên, Retail Audit chủ yếu tập trung đo lường tình hình hoạt động của các nhãn hàng trên kênh truyền thống và hiện đại. Hiện nay, theo xu hướng tất yếu cũng như được sự hỗ trợ bởi nhu cầu Go-online được thúc đẩy bởi COVID-19 và giãn cách xã hội,  hoạt động mua sắm online ngày càng đóng vai trò quan trọng & chiếm tỷ trọng lớn. Đặc biệt là một số ngành hàng như: thời trang, làm đẹp, điện tử, chăm sóc mẹ và bé… Vì thế, Ecommerce Audit sẽ giúp hoàn thiện bức tranh mua bán của toàn ngành hàng trên cả kênh offline và online.

Đọc bài viết
right
Ecommerce Audit (ECA) là gì?

E-commerce Audit - hay còn gọi là Nghiên cứu đo lường bán hàng trực tuyến - là việc thu thập và phân tích dữ liệu về tình hình hàng hóa của các cửa hàng trên sàn thương mại điện tử như: lượng hàng bán ra theo thời gian thực, giá & khuyến mãi, vị trí của hàng, số người theo dõi, bình luận của người dùng hay các phản hồi sau mua của người dùng.

Đọc bài viết
right
Tận dụng dữ liệu Social Listening cho Syndicated Research

Hiện nay, việc tiến hành nghiên cứu thị trường không chỉ là câu chuyện phát phiếu khảo sát hay phỏng vấn trực tiếp. Mạng xã hội ra đời, tiếp theo đó là các công cụ thu thập thảo luận mạng xã hội (tiêu biểu như Social Listening) đã đem lại một môi trường nghiên cứu linh hoạt hơn, đặc biệt là với các đề tài Syndicated Research. Câu hỏi đặt ra là: Sử dụng dữ liệu Social Listening để tạo ra các Syndicated Research như thế nào?

Đọc bài viết
right
COVID-19: Phân tích người dùng trước, trong và sau giãn cách xã hội

COVID-19 là chủ đề thảo luận nóng nhất trên mạng xã hội trong nửa đầu năm 2020. Riêng tháng 3 - tháng cao điểm của dịch bệnh, trung bình mỗi ngày có gần 2 triệu lượt thảo luận về COVID-19. Trong suốt diễn biến của dịch bệnh từ lúc bắt đầu - bùng phát - giãn cách xã hội - giảm dần, COVID-19 đã tạo ra nhiều biến đổi thú vị trong mối quan tâm và hành vi người dùng mạng xã hội. Trong báo cáo này, hãy cùng Buzzmetrics điểm lại các cột mốc và sự biến chuyển của người dùng qua các giai đoạn:

Đọc bài viết
right
Phương pháp nghiên cứu mới để khai thác Insight thông qua Social Listening

Ngày càng nhiều thương hiệu tập trung đầu tư vào mạng xã hội như một kênh truyền thông mới giúp kết nối với người dùng. Bằng việc phân tích thảo luận người dùng trên mạng xã hội và từ đó đưa ra các gợi ý hành động cho thương hiệu, Social Listening đang góp một phần không nhỏ vào cách thương hiệu xây dựng một chiến dịch truyền thông. Tuy nhiên, có bao giờ bạn thắc mắc: Các nhà nghiên cứu Social Listening đã sử dụng các phương pháp nào để tìm kiếm và phát hiện Insight người dùng?

Đọc bài viết
right
Giải pháp theo dõi sức khỏe thương hiệu toàn diện nhất trên social media

Giải pháp Always-On Brand Tracker của Buzzmetrics là gói giải pháp toàn diện cho tất cả các nhu cầu trên và hiện tại đang được hơn 200 thương hiệu hàng đầu Việt Nam như Coca-Cola, Unilever, Samsung, ... sử dụng. Giải pháp này bao gồm 4 modules trọn gói và không phải trả gì thêm với bất kỳ nhu cầu phát sinh nào.

Đọc bài viết
right
Hệ thống lắng nghe mạng xã hội thu thập dữ liệu như thế nào?

Social Listening là một mô hình kinh doanh biến thể của ngành nghiên cứu thị trường. Và cũng giống như các quy trình nghiên cứu thị trường truyền thống, hệ thống lắng nghe mạng xã hội thu  cũng phải trải qua 5 giai đoạn: Thu thập dữ liệu, Lấy mẫu, Phân loại dữ liệu, Phân tích dữ liệu, Trình bày báo cáo nghiên cứu...

Đọc bài viết
right
4 xu hướng Social Listening ứng dụng cho marketing năm 2016

Trên cương vị là những công ty tiên phong và dẫn đầu thị trường Social Listening, Buzzmetrics và YouNet Media đã tung ra thị trường ra những giải pháp công nghệ mang tính đột phá và giá trị gia tăng cao. Sau đây là tổng hợp một số xu hướng Social Listening đang phát triển của ngành này trong 2016.

Đọc bài viết
right
7 ngành hàng nổi bật trên mạng và các kênh phải chạy content

Để phục vụ cho công việc của content và media planner, công cụ lắng nghe mạng xã hội Buzzmetrics xin liệt kê các kênh có nhiều thảo luận nhất của từng ngành hàng để các bạn tham khảo.

Đọc bài viết
right
Làm thế nào để theo dõi chiến dịch marketing trên social media hiệu quả?

Social Listening giúp các nhà tiếp thị có thể lên kế hoạch, xây dựng content, theo dõi và điều chỉnh định hướng trong thời gian thực. Sau đây là những ứng dụng cụ thể của việc dùng Social Listening cho theo dõi chiến dịch marketing.

Đọc bài viết
right
Social listening và nghiên cứu thị trường truyền thống liên quan như thế nào?

Social Listening có thể được xem như là 1 biến thể của nghiên cứu thị trường. Phương pháp này có mối quan hệ tương hỗ với nghiên cứu thị trường truyền thống.

Đọc bài viết
right
Hệ thống thu thập dữ liệu của Social Listening tool khủng và tinh vi đến mức nào?

Các Social Listening Tool thu thập dữ liệu từ tất cả phương tiện truyền thông cho phép tương tác nhiều chiều, dựa trên hai phương pháp chính: API và Trang (Sites).

Đọc bài viết
right
Làm thế nào để tách biệt Paid, Owned và Earned media?

Việc tách biệt Paid, Owned và Earned media trong chiến dich social media ngày càng được các nhà quản lý chiến dịch quan tâm và yêu cầu social listening tool, mà cụ thể là Buzzmetrics thực hiện để có thể quản lý được chiến dịch marketing trên social media một cách hiệu quả hơn.

Đọc bài viết
right
Các hệ thống lắng nghe mạng xã hội đo lường Sentiment như thế nào?

Việc đo lường sentiment là một phần không thể thiếu trong các social media tool. Việc phân tích sentiment, nói một cách dễ hiểu, là lắng nghe và thấu hiểu những gì đang được nói về thương hiệu và chiến dịch trên các phương tiện truyền thông xã hội, nói như thế nào, tốt hay xấu, và tốt về mặt nào, xấu về mặt nào. Như vậy, để đo lường sentiment, thảo luận sẽ được chia thành thảo luận Tích cực, Tiêu cực, Trung lập và Hỗn hợp.

Đọc bài viết
right
Vén màn bí mật Công nghệ phân tích sentiment của các Social Listening tool

Bài viết này là một trong serie các bài viết cho thấy bức tranh thực sự về cách hoạt động của Buzzmetrics, một giải pháp lắng nghe và phân tích mạng xã hội đang được dùng để theo dõi các chiến dịch và thương hiệu quản lý bởi các tập đoàn lớn.

Đọc bài viết
right
7 thương hiệu nổi tiếng trên mạng không ngờ năm 2014

Công cụ lắng nghe mạng xã hội của Buzzmetrics xin góp vui những ngày trước Tết những thống kê thú vị về các thương hiệu trong tâm điểm của social media năm 2014.

Đọc bài viết
right
Social Listening - nghiên cứu thị trường chi phí thấp cho thương hiệu

Mạng xã hội là một Focus Group hàng triệu người chứa đựng ý kiến của người tiêu dùng trong thời gian thực. Giá trị của Social Listening nằm ở việc đào sâu vào nội dung thảo luận của người tiêu dùng để tìm ra được Consumer Insight.

Đọc bài viết
right
Social listening Việt Nam - Ngành nào nên đầu tư?

Social listening ở Việt Nam vẫn chưa được các nhà tiếp thị quan tâm và đầu tư đúng mức. Theo thống kê của Buzzmetrics, có đến 130 tập đoàn lớn ở Việt Nam và chỉ gần 60 trong số này hiện đã thử hoặc đang dùng social media marketing và social listening. Vậy những ngành hàng nào nên đầu tư vào Social media Marketing và Social Listening?

Đọc bài viết
right
Tại sao phải tách biệt Paid và Earned posts trong một chiến dịch social media marketing

Marketers phải quản lý 3 loại media: Paid, Owned và Earned. Trong social media, khái niệm Paid, Owned và Earned cũng được áp dụng

Đọc bài viết
right
Công cụ lắng nghe mạng xã hội hỗ trợ xử lý khủng hoảng truyền thông như thế nào?

Mạng xã hội có một sức mạnh to lớn trong việc quảng bá thương hiệu và đồng thời phát tán những cuộc khủng hoảng thương hiệu.

Đọc bài viết
right
Nhận tư vấn miễn phí
Theo dõi chúng tôi trên mạng xã hội
DMCA.com Protection Status