APP推广合作
联系“鸟哥笔记小乔”
产品也需要懂的数据埋点和日常数据分析
2021-03-29 14:50:53

 不论什么数据,都具有分析的意义。

数据反馈,不仅能验证我们的产品是否符合市场的预期,而且还能为我们优化产品,迭代产品提供需求,建立产品的优化飞轮。

因此,数据分析是形成整个产品工作闭环中,必不可少的一环。 

去年我们团队上线了一个新的产品,上线后,由于一直招不到合适的数据产品经理,因此团队让我先暂时支持下数据产品的基础工作。

于是,在这期间,我成了半个数据产品,在支持了一段时间的数据工作后,也建立了对数据的基本认知。

所以今天,我先从埋点开始,介绍下数据埋点工作过程中要了解的要点,同时补充介绍下,在数据分析工作中,可以直接应用一些分析框架和工作方法。

01 埋点与事件管理

1、什么是埋点、事件、参数 

埋点,是通过在程序中植入代码的方式,记录用户在软件(web、app、小程序)上的操作行为的技术手段。

事件,是记录用户在软件中操作行为的标签,如,用户在首页的曝光事件、按钮的点击事件等。

而在事件中,为了进一步区分事件的范围,更好地进行数据分析,会增加事件的“参数”,用来框定某个范围内的数据。如,时间参数、城市参数,就是用来筛选某个区间内事件上报数据的。 

假如,我们要看到3月20日的产品首页曝光人数。

我们首先可以在首页中增加带有“时间”参数的“曝光”事件埋点。 

在查询时,可通过代码在数据库中找到“首页曝光”这个事件,并在时间上选择“昨天”这个时间参数。 

就可以得到昨天在首页曝光的用户数。 

2、事件分类

事件是通过用户在软件中留下的痕迹,来进行统计和上报的。

因此,从用户痕迹获取的维度上来看,事件可分为:基础事件和行为事件

(1)基础事件是用户的属性标签,可用来建立用户画像的。如,用户id、城市、地址、年龄、经纬度、设备、ip地址、运营商、网络等信息,都属于基础事件。

(2)行为事件就是用户在软件上的行为标签。如,曝光pv/uv、点击pv/uv、停留时长等,都属于行为事件。而根据用户操作的行为,行为事件又可进一步细分出以下三类: 

  • 点击事件。指用户在软件中的点击,如用户在某个按钮、某个功能的点击,都记录为一次点击事件;

  • 曝光事件。指用户打开页面的行为,如用户在某个页面上曝光一次,记录为一次曝光事件;

  • 页面事件。指用户在页面中的操作,如,通过统计A用户在B页面停留时长;

3、埋点的方式

介绍完事件分类之后,我们再来看下埋点的两种主要方式:

(1)私有化部署,全部功能都自己开发,在代码中写入事件和上报逻辑,并搭建起相应的查询后台,埋点后,事件上报到对应的平台即可进行可视化呈现。 

私有化部署的优势是:数据安全性高;且可根据业务需要,定制埋点逻辑;

但缺点也同样明显,就是不论是埋点开发还是可视化平台的搭建,所耗费的成本都比较高; 

所以,一般只有大厂或相对成熟的产品,才会选择私有化部署的方案。

(2)第三方统计工具,如使用友盟、神策等平台工具进行埋点、统计和上报。 

这么做的话,优劣势和自行开发刚好相反:通用化的方案,带来的结果是可自定义程度低,但成本也会相对较低。 

所以,一般中小型企业或新产品,都会选择此方式,满足业务的基本数据诉求。 

4、埋点工作流程

 

从工作流程上来说,埋点需要业务方先从拆解需求核心流程开始梳理,提出埋点需求;

开发团队根据埋点逻辑进行开发,开发完成后,测试团队进行上线前的测试;

上线之后,产品将数据的事件维护到表格中,而后,业务方才方便根据反馈的数据,定义数据,进行数据分析或可视化呈现。

因此,埋点也是数据采集和分析的基础。而在埋点开发到上线过程中,我们要注意以下几点:

(1)埋点方案,要保证埋点需求的合理性

随着数据维度的健全,所需的数据量也增大,因此需要埋点的事件也会越来越多,这是必然的趋势。 

但因为埋点的本质是代码中加入代码,因此如果埋点的事件增多,也必然会导致软件加载速度变慢,影响用户体验。 

所以,埋点需求一定要仔细审核,否则就是给后面工作挖坑。 

因此,一般我在收集埋点需求时,都会让业务方在文档中尽可能明确的阐述,每一个埋点的意义和价值(尤其是曝光事件),否则不予上报。

以此来减少产品代码压力,提升产品使用体验。

(2)埋点测试,验证每一个埋点和参数的上报情况

测试,是保证需求上线后能够正常运转的最后一道关卡。

所以埋点开发完成后,除了测试要验证埋点是否上报上报之外,产品人也必须亲自确认,看数据是否正常上报、相关参数是否正常加入埋点。 

(3)事件管理,要建立建全的统计维度

在埋点需求上线之后,我们也要建立事件管理的表格,以便后续在进行数据分析时,快速得到数据源

如上图所示,我们团队就是用表格中的这几个维度,来对所有事件进行维护和管理的:

  • 场景id和场景名称:在哪个页面执行的埋点——id是代码层面的统计,名称则是后续查询的时候方便识别;

  • 位置id和位置说明:在页面中的哪个位置写入埋点上报事件;

  • 行为id和行为说明:主要是曝光、点击、停留时长等行为,用来区分用户的操作;

  • 事件英文和事件中文:埋点的具体事件名称,我们一般是“场景”+“0”+“位置”+“0”+“行为”;

(除了“0”之外,也可以用“_”来连接,但不可用“-”,因为代码无法识别这个字段)

  • 参数(key):用来进一步区分当前事件下的不同维度,如表中所示,time代表时间——用来区分这个事件下曝光时间点,city代表城市——用来区分这个事件下的城市维度; 

通过上述方式对事件进行管理之后,团队成员就能在文档中,快速查询到对应事件。

(4)事件更新同步 

事件都写入维护表格之后,还有很重要的一步,就是一定要和各相关方,尤其是和业务关联的核心产品或运营团队,同步上报事件逻辑。

否则,在一定时间内,你的工作重心就变成天天帮他们找事件,解释每个事件意义...

一般在版本发布后,我们团队产品、研发和运营都会组织个上线会,同步版本新增功能,而我一般也会趁这个机会,给大家同步数据事件的更新情况。

02 数据分析

在埋点正常上报之后,我们就需要通过定期查看上报数据,来判断产品的数据表现情况。

1、核心指标:北极星指标 

在进行数据分析之前,我们得先了解产品的核心指标,也就是“北极星指标”。 

北极星指标,是产品在某个阶段内最关键的唯一指标,因为它像北极星一样指引着前进的方向,通过它能反映当前团队对产品核心价值的追求的指标。

因为每个团队业务不同,要关注的核心数据也不同。 

如,电商产品,北极星指标或许是交易笔数,又或许是成交量;而社交产品,北极星指标是活跃用户数; 

所以,北极星指标的制定,通常是由数据团队,产品团队,运营团队共同定义出来的指标。

并由此出发,进一步量化,并最终拆解成各团队的业务考核指标。 

所以说,我们在工作中,也需要要时常关注团队的北极星指标,以此来判断我们的工作方向是否正确。

除此之外,同行业的产品在不同的发展周期,要关注的核心数据也会有所不同。

业务前期,目的是抢占市场,所以,业务要关注用户对产品的认可度,此时的北极星指标可从产品的使用量出发。

如,在微信上线初期,北极星指标是每日成功发送的消息数。 

业务中期,目的是为了验证产品能否解决用户需求,所以,业务更应该关注用户结构,优化用户结构,此时的北极星指标可从用户活跃度出发。

如,Facebook就曾把月活跃用户数,作为北极星指标。

业务后期,目的是变现能力和市场份额,所以,业务核心是要关注产品转化量和收益,那此时的北极星指标,就可从营收情况出发。

如,爱奇艺当前的北极星指标,就应该是付费会员数;

2、发现问题:异常数据排查四步法

在产品基础数据能力搭建完成,且业务团队也定义了本阶段的北极星指标后,产品人要养成查看数据的习惯。

首先先关注产品每日核心数据是否出现异常,并尝试分析定位问题,这样才能及时发现产品问题,找到产品突破点。

刚支持数据业务时,我经常被我领导diss。

主要是因为我在定位异常数据时,没有掌握系统的方法,不能及时解决问题,导致产品隔三差五就会被用户投诉。 

而在我定位了数十次数据问题后,终于总结出一套异常数据定位的方法论,主要分为以下四步:

(1)确认数据异常情况

如果有人告诉你说某个模块数据出问题了,叫你排查,一定要先自己核实数据异常情况,千万不能人云亦云。

其次,我们在定位问题时,要先尝试初步判断问题产生的原因。

可以先拉长时间维度,看是否是行业的淡旺季导致产品周期性变化,还是真的是产品数据出现异常了。 

所查看后,确认是近期才发生的数据骤增或骤降的情况,我们再从宏观、中观、微观三个层次逐步排查。

(2)宏观社会因素:假期、政策影响

宏观的社会效应,是由于大环境的变换影响整个行业,导致产品数据突增或突降,如:

  • 假期效应:国庆节,导致全国用户出行暴增,从而导致携程等旅游产品用户数据暴增;

  • 政策影响:深圳政府7.15房地产制度,提出购房指导价,对整个深圳的房地产都产生了不小的冲击,进而导致贝壳买房app在2020年7月16日用户访问数据下降;

(3)中观市场因素:热点事件、大型活动、竞品调整、城市因素 

中观的市场因素,是由于行业变化或短期市场波动导致的,如:

  • 热点事件,今年315点名简历问题,导致智联、猎聘等平台品牌受损,用户访问量下降;

  • 大型活动,双11、618等活动导致电商平台影响;

  • 竞品调整,竞品上线新功能或新的运营能力,如爱奇艺上线超前点播功能,对优酷、腾讯视频用户产生影响;

  • 城市因素,如某城市突降暴雨,导致该城市打车用户突增,滴滴的产品数据也猛然上涨;

(4)微观内部因素:产品功能更新,运营策略、数据分析逻辑通路

如果宏观和中观都排除之后,通常就是产品本身出现了问题,如:

  • 产品版本迭代,产品上了新功能模块,导致某页面访问用户增加或减少

  • 运营策略,如运营做了产品推广策略,导致一段时间内产品用户突增,但运营没有及时和我们同步活动的时间节点;

  • 底层数据问题,如上报逻辑出错,导致多渠道数据埋点未能正常上报;

根据数据异常排查的经验来看,以上排查四步,可以有效解决90%的产品数据异常的问题。 

3、工作前置:建立告警

可在实际工作中,我们不能等同事发现并跟你提出了问题,才思考解决方案。

这样不仅会打断自己的工作计划,而且无法从根本上解决问题。久而久之,我们就会变成整天忙于异常定位的救火队员了。

所以,为了减少异常数据发展成更为严重的产品事故,也为了提高我们的工作效率,我们可以在产品的核心流程中,增加告警上报机制。

之所以只在产品的核心流程中设置,是因为如果告警太多,维护的开发迟早会麻木的。一旦麻木,就失去了设置告警的意义。

比如,可以在用户支付流程中,对产生的报错码建立监控体系。

我们团队的规则是,当有大于5个用户拉起微信支付失败,即支付失败报错码出现报错次数大于5时,平台就会出发告警,并触达开发,让开发去排查和定位问题。

从而减少由于小范围的产品问题演变成影响大量用户使用的产品事故。

4、锻炼自己的数据感 

告警机制只能解决核心产品流程的问题,但产品的组成,除核心流程之外,还有很多其他的功能也需要我们时常关注。

所以,除了系统层面的解决方案之外,我们自己也要养成看数据的习惯。

数据感,是我们在分析事情,或说服他人的时候,都能用数据来证明自己的想法;在看到数据时,会去思考数据的合理性与准确性。

培养数据感和产品感一样,都是需要我们长时间对数据的思考、沉淀和积累之后,实现从量变到质变的过程。

所以我们团队也会要求每个产品人,每天都必须抽时间看看产品的数据表现,我一般是早上9点-11点的时候,看昨天的数据日报。

虽然说刚开始看数据时,数据工作确实是一个无聊且枯燥的工作。 

因为每天的数据无非就是突增、突降、正常,这三种情况,所以很多人会觉得很无聊。

可我们日常的数据分析就是要从这三种情况下,找到产品的优化点和破局点:

如果是数据突增,产品要思考能否趁风而起,提升产品指标;

如果是数据突降,可以从更长时间周期进行分析,看是周期性环境变化、稳步下降的产品原因、亦或是内部产品迭代导致的异常,进而提出优化需求或策略。

即便是每天都一样的数据,也能说明现在的产品策略,无法实现产品的稳步增长,产品也可以进一步调整产品策略。 

因此,不论什么数据,都存在分析的价值和意义。

只有意识到这点,数据分析才算是真正入了门。

写在最后

在产品的日常工作中,关注产品数据也是很重要的一部分。 

在之前的文章中,虽然有**一些数据的部分,但个人觉得在之前的文章中介绍的相对零散,不足以形成体系。

所以,我用这篇文章,从数据埋点和日常数据分析两个层面,给大家介绍了下数据分析工作中要关注的内容和一些方法论: 

  • 埋点、事件、参数的基本知识,并在埋点工作中,要关注需求合理性,做好上线前的测试、文档管理和事件同步;

  • 在数据分析中,要关注产品核心数据,建立告警机制,并从每日的数据观察中,培养出自己的数据感;若数据异常时,可从核实异常、宏观、中观、微观这四步入手,对异常数据进行定位和分析;

-END-

成为陈维
分享到朋友圈
收藏
收藏
评分

综合评分:

我的评分
Xinstall 15天会员特权
Xinstall是专业的数据分析服务商,帮企业追踪渠道安装来源、裂变拉新统计、广告流量指导等,广泛应用于广告效果统计、APP地推与CPS/CPA归属统计等方面。
20羽毛
立即兑换
超级nice便签砖
超级超级超级奈斯!
1000羽毛
立即兑换
一书一课30天会员体验卡
领30天VIP会员,110+门职场大课,250+本精读好书免费学!助你提升职场力!
20羽毛
立即兑换
成为陈维
成为陈维
发表文章17
是个努力生活的产品人
确认要消耗 0羽毛购买
产品也需要懂的数据埋点和日常数据分析吗?
考虑一下
很遗憾,羽毛不足
我知道了

我们致力于提供一个高质量内容的交流平台。为落实国家互联网信息办公室“依法管网、依法办网、依法上网”的要求,为完善跟帖评论自律管理,为了保护用户创造的内容、维护开放、真实、专业的平台氛围,我们团队将依据本公约中的条款对注册用户和发布在本平台的内容进行管理。平台鼓励用户创作、发布优质内容,同时也将采取必要措施管理违法、侵权或有其他不良影响的网络信息。


一、根据《网络信息内容生态治理规定》《中华人民共和国未成年人保护法》等法律法规,对以下违法、不良信息或存在危害的行为进行处理。
1. 违反法律法规的信息,主要表现为:
    1)反对宪法所确定的基本原则;
    2)危害国家安全,泄露国家秘密,颠覆国家政权,破坏国家统一,损害国家荣誉和利益;
    3)侮辱、滥用英烈形象,歪曲、丑化、亵渎、否定英雄烈士事迹和精神,以侮辱、诽谤或者其他方式侵害英雄烈士的姓名、肖像、名誉、荣誉;
    4)宣扬恐怖主义、极端主义或者煽动实施恐怖活动、极端主义活动;
    5)煽动民族仇恨、民族歧视,破坏民族团结;
    6)破坏国家宗教政策,宣扬邪教和封建迷信;
    7)散布谣言,扰乱社会秩序,破坏社会稳定;
    8)宣扬淫秽、色情、赌博、暴力、凶杀、恐怖或者教唆犯罪;
    9)煽动非法集会、结社、游行、示威、聚众扰乱社会秩序;
    10)侮辱或者诽谤他人,侵害他人名誉、隐私和其他合法权益;
    11)通过网络以文字、图片、音视频等形式,对未成年人实施侮辱、诽谤、威胁或者恶意损害未成年人形象进行网络欺凌的;
    12)危害未成年人身心健康的;
    13)含有法律、行政法规禁止的其他内容;


2. 不友善:不尊重用户及其所贡献内容的信息或行为。主要表现为:
    1)轻蔑:贬低、轻视他人及其劳动成果;
    2)诽谤:捏造、散布虚假事实,损害他人名誉;
    3)嘲讽:以比喻、夸张、侮辱性的手法对他人或其行为进行揭露或描述,以此来激怒他人;
    4)挑衅:以不友好的方式激怒他人,意图使对方对自己的言论作出回应,蓄意制造事端;
    5)羞辱:贬低他人的能力、行为、生理或身份特征,让对方难堪;
    6)谩骂:以不文明的语言对他人进行负面评价;
    7)歧视:煽动人群歧视、地域歧视等,针对他人的民族、种族、宗教、性取向、性别、年龄、地域、生理特征等身份或者归类的攻击;
    8)威胁:许诺以不良的后果来迫使他人服从自己的意志;


3. 发布垃圾广告信息:以推广曝光为目的,发布影响用户体验、扰乱本网站秩序的内容,或进行相关行为。主要表现为:
    1)多次发布包含售卖产品、提供服务、宣传推广内容的垃圾广告。包括但不限于以下几种形式:
    2)单个帐号多次发布包含垃圾广告的内容;
    3)多个广告帐号互相配合发布、传播包含垃圾广告的内容;
    4)多次发布包含欺骗性外链的内容,如未注明的淘宝客链接、跳转网站等,诱骗用户点击链接
    5)发布大量包含推广链接、产品、品牌等内容获取搜索引擎中的不正当曝光;
    6)购买或出售帐号之间虚假地互动,发布干扰网站秩序的推广内容及相关交易。
    7)发布包含欺骗性的恶意营销内容,如通过伪造经历、冒充他人等方式进行恶意营销;
    8)使用特殊符号、图片等方式规避垃圾广告内容审核的广告内容。


4. 色情低俗信息,主要表现为:
    1)包含自己或他人性经验的细节描述或露骨的感受描述;
    2)涉及色情段子、两性笑话的低俗内容;
    3)配图、头图中包含庸俗或挑逗性图片的内容;
    4)带有性暗示、性挑逗等易使人产生性联想;
    5)展现血腥、惊悚、残忍等致人身心不适;
    6)炒作绯闻、丑闻、劣迹等;
    7)宣扬低俗、庸俗、媚俗内容。


5. 不实信息,主要表现为:
    1)可能存在事实性错误或者造谣等内容;
    2)存在事实夸大、伪造虚假经历等误导他人的内容;
    3)伪造身份、冒充他人,通过头像、用户名等个人信息暗示自己具有特定身份,或与特定机构或个人存在关联。


6. 传播封建迷信,主要表现为:
    1)找人算命、测字、占卜、解梦、化解厄运、使用迷信方式治病;
    2)求推荐算命看相大师;
    3)针对具体风水等问题进行求助或咨询;
    4)问自己或他人的八字、六爻、星盘、手相、面相、五行缺失,包括通过占卜方法问婚姻、前程、运势,东西宠物丢了能不能找回、取名改名等;


7. 文章标题党,主要表现为:
    1)以各种夸张、猎奇、不合常理的表现手法等行为来诱导用户;
    2)内容与标题之间存在严重不实或者原意扭曲;
    3)使用夸张标题,内容与标题严重不符的。


8.「饭圈」乱象行为,主要表现为:
    1)诱导未成年人应援集资、高额消费、投票打榜
    2)粉丝互撕谩骂、拉踩引战、造谣攻击、人肉搜索、侵犯隐私
    3)鼓动「饭圈」粉丝攀比炫富、奢靡享乐等行为
    4)以号召粉丝、雇用网络水军、「养号」形式刷量控评等行为
    5)通过「蹭热点」、制造话题等形式干扰舆论,影响传播秩序


9. 其他危害行为或内容,主要表现为:
    1)可能引发未成年人模仿不安全行为和违反社会公德行为、诱导未成年人不良嗜好影响未成年人身心健康的;
    2)不当评述自然灾害、重大事故等灾难的;
    3)美化、粉饰侵略战争行为的;
    4)法律、行政法规禁止,或可能对网络生态造成不良影响的其他内容。


二、违规处罚
本网站通过主动发现和接受用户举报两种方式收集违规行为信息。所有有意的降低内容质量、伤害平台氛围及欺凌未成年人或危害未成年人身心健康的行为都是不能容忍的。
当一个用户发布违规内容时,本网站将依据相关用户违规情节严重程度,对帐号进行禁言 1 天、7 天、15 天直至永久禁言或封停账号的处罚。当涉及欺凌未成年人、危害未成年人身心健康、通过作弊手段注册、使用帐号,或者滥用多个帐号发布违规内容时,本网站将加重处罚。


三、申诉
随着平台管理经验的不断丰富,本网站出于维护本网站氛围和秩序的目的,将不断完善本公约。
如果本网站用户对本网站基于本公约规定做出的处理有异议,可以通过「建议反馈」功能向本网站进行反馈。
(规则的最终解释权归属本网站所有)

我知道了
恭喜你~答对了
+5羽毛
下一次认真读哦
成功推荐给其他人
+ 10羽毛
评论成功且进入审核!审核通过后,您将获得10羽毛的奖励。分享本文章给好友阅读最高再得15羽毛~
(羽毛可至 "羽毛精选" 兑换礼品)
好友微信扫一扫
复制链接