将海量的“大数据”转化为洞见

一个利用大数据进行的真实市场调研案例研究

市场调研行业对消费者数据并不陌生。然而，通过在线行为产生的海量“大数据”，为洞察专家和营销人员带来了诸多挑战与机遇。随着消费者在网上留下源源不断的数字足迹，我们该如何最有效地分析这些行为，并在个体层面采取相应行动？

这就是ArchDaily.com在过去三年中积累了20 TB大数据后所面临的挑战。作为全球领先的建筑网站，解读这些数据的复杂程度远超其预期。 该网站每月拥有1.5亿至2亿次页面浏览量，能够观察到海量的用户行为数据。然而，ArchDaily.com并不清楚究竟是什么在驱动用户行为。它希望更好地预测建筑行业趋势，并识别关键驱动因素，从而优化其在线内容策略。

从数据中提取洞见并非易事，尤其是在大数据的规模下，但作为数据专家，SKIM 团队深入钻研，致力于攻克这一分析难题。

请继续阅读，了解我们为 ArchDaily.com 采用的洞察方法，以及将数千兆字节的数据转化为实际行动所取得的商业成果。

大数据分析的挑战

ArchDaily.com 由两名建筑系学生于 2006 年创立。该网站最初设计为一个博客，旨在为昂贵的建筑杂志订阅提供替代选择。如今，ArchDaily.com已成为领先的建筑门户网站，致力于提供灵感与知识，助力全球建设更美好的城市。该网站每月拥有 1400 万名建筑师访问。建筑师们将 ArchDaily.com 作为获取灵感和信息的主要来源，并借此查阅经过精心筛选的工具和供应商清单。

与大多数在线平台一样，凭借巨大的月度网站流量，ArchDaily 积极寻求进一步实现数据变现的新途径，并于 2017 年开始认真追踪其数据。当时，他们的访问量确实非常可观。 除了追踪页面浏览量和其他基本指标外，他们还具有前瞻性地开始追踪网站上的更多“事件”——从所有点击到收藏行为，无所不包。虽然当时他们可能并未将其视为“大数据战略”，但他们深知追踪网站上的用户行为至关重要，这也标志着他们踏上了大数据提取的征程。

虽然ArchDaily的数据科学团队能够根据页面浏览量和较高的互动率识别出热门项目，但他们无法确定浏览量居高不下是因为用户对文章本身感兴趣，还是因为作为建筑内容的领先提供商，他们通过发布相关文章在一定程度上助推了这种热度。他们意识到，必须找到一种方法来消除数据中的出版偏见。

结合洞察与数据科学，更准确地预测在线行为

ArchDaily.com 的数据科学家利用机器学习创建了模型，但要从这些半结构化的大数据中获取、处理并提取价值，同时确保分析和方法论的严谨性，是一项艰巨的任务。他们意识到，运用advanced analytics 数据中提取更丰富的洞察，有助于更好地预测和理解用户的在线行为。

“对于这个大数据项目，我们需要一位方法论专家来增强数据科学团队的分析严谨性，这也正是我们选择SKIM的原因，”ArchDaily.com首席运营官吉列尔莫·泽丹表示。

因此，ArchDaily.com 与我们合作，利用我们的大数据研究框架，共同应对他们面临的两大最紧迫的业务挑战：

1. 识别、量化并预测流行的建筑趋势，同时考虑其自身的发表偏倚。
2. 根据关键绩效指标对网站上的所有文章进行分类和聚类，以识别并对比爆款文章与其他文章的关键驱动因素。

大数据研究解决方案

我们组建了一支由方法论专家、数据科学advanced analytics 和advanced analytics 组成的团队，为 ArchDaily.com 打造了一套定制化的研究解决方案。该解决方案部署在基于 Google Cloud Platform 的云环境中；我们结合了机器学习算法和强大的统计建模技术，从 ArchDaily 的内部数据以及外部基准数据中提取价值。 具体而言，基于ArchDaily过去三年的数据，我们对一万余篇介绍建筑项目的文章进行了细分，并筛选出约1,200个变量，从而绘制用户画像并识别出能为其商业战略带来切实价值的有用细分群体。

例如，我们了解到，如果ArchDaily.com发布一项竞赛，虽然这会带来流量，但这种热度往往昙花一现，对他们的业务价值有限。相反，能够准确量化可持续材料（如竹材）这一新兴趋势的流行程度，不仅极大提升了他们预测的可信度，还为广告商创造了立竿见影的附加价值，使得他们未来的报告对客户极具吸引力。

将大数据洞察付诸实践

新用户获取和现有用户的参与度是任何成功在线平台的基石，因此我们针对200多个关键建筑术语制定了搜索预测，以便更好地了解网站访客的搜索需求。通过将预测仪表盘整合到ArchDaily.com的规划和内容策划流程中，该平台现在能够预见未来目标用户需求日益增长的建筑趋势，而不再受限于过去的发布计划。

因此，ArchDaily.com 现能将用户最关注的内容纳入内容策划流程，从而优化其编辑规划和内容策略。该在线平台如今也拥有了必要的工具，能够提高发布爆款文章的概率。 更重要的是，通过这项大数据分析，ArchDaily.com 现在能够识别并向建筑师和建筑爱好者提供更相关的内容，从而助力他们在全球范围内设计出更美好的城市和生活空间。

“制造商通过采购行为所能观察到的趋势，与我们在平台上所见到的趋势之间存在时间差——即项目从勘探阶段到建设阶段之间存在时间差。目前在我们平台上流行的趋势，将在三年后对市场产生影响。”

“你可以想象这对业务预测有多么有价值，”泽丹说道。

开启您的大数据洞察之旅

随着可用数据源的不断增加，我们看到各行各业在洞察挖掘和数据驱动型营销方面都涌现出更多机遇。除了从数据中得出的普遍趋势或观察结果外，最具价值的是那些可付诸实践的洞察。正如 ArchDaily.com 的经验所示，这正是大数据战略所能带来的真正竞争优势。

SKIM我们认为，在这个日益由大数据主导的世界里，洞察专业人士需要适应当今的现实；他们需要深入分析并整合多组数据，从而提供更全面的评估。我们需要对数据来源保持“中立”。

然而，处理大数据会带来诸多挑战和问题，这些在传统市场调研项目中可能不会遇到。具体而言，您需要考虑客户与洞察机构之间的互动频率和程度、处理海量非结构化数据所需的软硬件架构，以及所采用的机器学习算法与多元统计分析的结合。 您很快就会意识到，像我们与ArchDaily.com合作开展的那样的大数据洞察项目，既是一次探索洞察的独特旅程，也是一次发掘流程最佳实践的独特旅程。

从大数据分析到数据融合、机器学习和自动化技术 SKIM 站在advanced analytics 创新的前沿。我们不断探索创新方法，助力领先企业更好地理解和预测决策行为。

您是否希望从您的大数据中挖掘出更深入的洞察？ 我们充满热情的分析团队将协助您规划如何从今天开始行动。