广告实验和发布方法及系统

1.广告实验和发布方法，其特征在于，包括：
采用随机数对实验流量进行标识，对未采用实验标识的流量采用默认标识；
判定实验标识和默认标识，为所述实验标识配置与其相对应的实验策略，并为所述默认标识配置与其相对应的默认策略；
响应客户端的展现和点击操作，生成携带所述实验标识或默认标识的展现日志，以及，生成携带所述实验标识或默认标识的点击日志；以及
统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估；
所述采用随机数对实验流量进行标识，对未采用实验标识的流量采用默认标识包括：
对实验流量进行比例设定，采用随机数生成流量标识，按照实验流量的比例对线上流量打上流量标识，命中实验的流量被打上实验标识，否则打上默认标识；
响应客户端的展现和点击操作，生成携带所述实验标识或默认标识的展现日志，以及，生成携带所述实验标识或默认标识的点击日志包括：
响应客户端的展现操作，依据所述展现操作对应的当前流量的实验标识或默认标识，确定所述展现操作对应的实验策略或默认策略；
依据所述展现操作对应的实验策略或默认策略，生成携带所述实验标识或默认标识的展现日志；
以及；
响应客户端的点击操作，依据所述点击操作对应的当前流量的实验标识或默认标识，确定所述点击操作对应的实验策略或默认策略；
依据所述点击操作对应的实验策略或默认策略，生成携带所述实验标识或默认标识的点击日志。
2.根据权利要求1所述的广告实验和发布方法，其特征在于，统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估包括：
利用统计学算法统计带有标识的展现日志和点击日志，计算出相应实验策略或默认策略的对比和评估。
3.根据权利要求2所述的广告实验和发布方法，其特征在于，所述对比和评估结果包括广告检索量、展现量、点击量、按点击付费的出价、点击率、广告位覆盖率、千次检索收益中任意一者。
4.根据权利要求1所述的广告实验和发布方法，其特征在于，所述响应客户端的展现或点击操作后，生成带有实验标识加密串的跳转URL。
5.广告实验和发布系统，其特征在于，包括：
流量标识单元，用于采用随机数对实验流量进行标识，对未采用实验标识的流量采用默认标识；
策略配置单元，用于为所述实验标识配置与其相对应的实验策略，并为所述默认标识配置与其相对应的默认策略；
广告检索和播放单元，用于判定实验标识和默认标识，并响应客户端的展现和点击操作，生成携带所述实验标识或默认标识的展现日志，以及，生成携带所述实验标识或默认标识的点击日志；以及
统计单元，用于统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估；
所述流量标识单元具体用于：
对实验流量进行比例设定，采用随机数生成流量标识，按照实验流量的比例对线上流量打上流量标识，命中实验的流量被打上实验标识，否则打上默认标识；
所述广告检索和播放单元具体用于：
响应客户端的展现操作，依据所述展现操作对应的当前流量的实验标识或默认标识，确定所述展现操作对应的实验策略或默认策略；
依据所述展现操作对应的实验策略或默认策略，生成携带所述实验标识或默认标识的展现日志；
以及；
响应客户端的点击操作，依据所述点击操作对应的当前流量的实验标识或默认标识，确定所述点击操作对应的实验策略或默认策略；
依据所述点击操作对应的实验策略或默认策略，生成携带所述实验标识或默认标识的点击日志。
6.根据权利要求5所述的广告实验和发布系统，其特征在于，所述统计单元利用统计学算法统计带有标识的展现日志和点击日志，计算出相应实验策略或默认策略的对比和评估。
7.根据权利要求6所述的广告实验和发布系统，其特征在于，所述对比和评估结果包括广告检索量、展现量、点击量、按点击付费的出价、点击率、广告位覆盖率、千次检索收益中任意一者。
8.根据权利要求5所述的广告实验和发布系统，其特征在于，所述广告检索和播放单元用于响应客户端的展现或点击操作，生成带有实验标识加密串的跳转URL。

广告实验和发布方法及系统\n技术领域\n[0001] 本发明涉及搜索技术，特别涉及一种广告实验和发布方法及系统。\n背景技术\n[0002] 目前，基于线上流量的实验系统是广告检索和播放系统不可或缺的一部分，其广泛用于检验各种广告策略，如广告检索、排序和计费等在真实的线上环境中的效果。\n[0003] 然而，现有的实验系统存在以在缺陷：\n[0004] (1)、广告策略实验系统需要单独部署，单独部署虽然可以避免实验策略对线上系统产生影响，但是单独部署往往意味着需要独立维护；另一方面，线上系统和实验系统的同步升级存在很多问题，经过多次升级之后，很难保证实验系统和线上系统在除策略以外的一致性；\n[0005] (2)、广告策略实验系统所分担的实验流量有限，广告策略实验系统有限的实验流量导致了实验策略最多只能经过很小流量的检验，一方面收敛较慢，实验者需要等待较长的时间；另一方面也使得实验策略在灰度发布时无法完成全流量的灰度发布，不能实现线上策略到实验策略的平滑过度。\n发明内容\n[0006] 为了解决现有技术中广告策略实验系统需要单独部署，且实验策略在灰度发布时无法完成全流量的灰度发布的问题，本发明实施例提出了一种基于线上流量的一体化实验和发布方法及系统。所述技术方案如下。\n[0007] 一种广告实验和发布方法，包括：\n[0008] 采用随机数对实验流量进行标识，对未采用实验标识的流量采用默认标识；\n[0009] 判定实验标识和默认标识，为所述实验标识和默认标识配置与其相对应的实验策略或默认策略；\n[0010] 响应客户端的展现或点击操作，生成携带所述实验标识或默认标识的展现日志和点击日志；以及\n[0011] 统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估。\n[0012] 一种广告实验和发布系统，包括：\n[0013] 流量标识单元，用于采用随机数对实验流量进行标识，对未采用实验标识的流量采用默认标识；\n[0014] 策略配置单元，用于为所述实验标识和默认标识配置与其相对应的实验策略或默认策略；\n[0015] 广告检索和播放单元，用于判定实验标识和默认标识，并响应客户端的展现或点击操作，生成携带所述实验标识或默认标识的展现日志和点击日志；以及\n[0016] 统计单元，用于统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估。\n[0017] 相对于现有技术，本发明实施例提供的广告实验和发布方法采用随机数分配实验流量，使得实验系统和线上系统合二为一，避免不一致导致实验结果不准确，另一方面，所述广告实验和发布方法及系统区别于现有技术，其不采用流量分配，从而支持实验策略从小流量到全流量的灰度发布，实现了线上系统中广告策略的平稳升级，可不限实验流量得到实验结果，具有安全可靠、维护方便的优点。\n附图说明\n[0018] 为了更清楚地说明本发明实施例的技术方案，下面将对实施例中使用的附图作一简单地介绍，显而易见地，下面所列附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。\n[0019] 图1是本发明实施例提供的广告实验和发布方法的流程示意图；\n[0020] 图2是本发明实施例提供的广告实验和发布方法的操作方法示意图；\n[0021] 图3是本发明实施例提供的广告实验和发布系统的结构示意图。\n具体实施方式\n[0022] 下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其它实施例，都属于本发明保护的范围。\n[0023] 实施例1\n[0024] 本发明第一实施例提出了一种广告实验和发布方法，其流程如图1所示，包括：\n[0025] 步骤101：采用随机数对实验流量进行标识，对未采用实验标识的流量采用默认标识；\n[0026] 步骤102：判定实验标识和默认标识，为所述实验标识和默认标识配置与其相对应的实验策略或默认策略；\n[0027] 步骤103：响应客户端的展现或点击操作，生成携带所述实验标识或默认标识的展现日志和点击日志；\n[0028] 步骤104：统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估。\n[0029] 本发明实施例提供的广告实验和发布方法采用随机数分配实验流量，使得实验系统和线上系统合二为一，避免不一致导致实验结果不准确，另一方面，所述广告实验和发布方法区别于现有技术，其不采用流量分配，从而支持实验策略从小流量到全流量的灰度发布，实现了线上系统中广告策略的平稳升级，可不限实验流量得到实验结果，具有安全可靠、维护方便的优点。\n[0030] 实施例2\n[0031] 请一起参阅图2，本发明第二实施例提出了一种广告实验和发布方法，其是在第一实施例基础上改进而来，其流程与第一实施例相类似，\n[0032] 具体操作如下。\n[0033] 在本实施例中，如图2所示，可以由实验者对实验流量进行比例设定，例如，设定总流量的10%或20%作为实验流量，本实施例中，可以设定总流量的10%作为实验流量。可以理解的是，在其它变更实施方式中，可以设定其它比例，如30%或40%作为实验流量，不局限于具体实施例。\n[0034] 接着，采用随机数生成流量标识(Tag)，直接按照实验流量的比例对线上流量打上tag，命中实验的流量被打上实验tag，否则打上默认tag。\n[0035] 本实施例中，在判定实验标识和默认标识，为所述实验标识和默认标识配置与其相对应的实验策略或默认策略的步骤中，广告检索和播放单元40要完成两方面的工作，一方面从策略配置单元20中分别载入实验策略和线上默认策略，在实际使用系统中，使用“tag->广告策略”的hash-map存储，另一方面，根据当前流量的tag，决定触发tag对应的实验策略或者线上默认策略，再返回广告并生成展现日志，此时携带的跳转URL是带有实验流量tag的加密串。\n[0036] 在响应客户端的展现或点击操作，生成携带所述实验标识或默认标识的展现日志和点击日志的步骤中，其流程可以为：在web前端，当用户进行搜索，例如用户点击了广告，则该tag会通过URL传递给点击服务器（click server）30并记录到点击日志中。\n[0037] 最后，由统计单元50统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估。具体地，统计单元50利用统计学算法统计带有tag的展现日志和点击日志，计算出相应实验策略的广告检索量（QV）、展现量（ads impressions）、点击量（click）、按点击付费的出价（cost per click，CPC）、点击率（click-through rate，CTR）、广告位覆盖率（ads coverage）、千次检索收益（rpm）等衡量广告策略效果的重要评价指标。\n[0038] 本发明实施例提供的广告实验和发布方法采用随机数分配实验流量，使得实验系统和线上系统合二为一，避免不一致导致实验结果不准确，另一方面，所述广告实验和发布方法区别于现有技术，其不采用流量分配，从而支持实验策略从小流量到全流量的灰度发布，实现了线上系统中广告策略的平稳升级，可不限实验流量得到实验结果，具有安全可靠、维护方便的优点。所述方法不只针对搜索广告，对于长尾广告系统同样适用。\n[0039] 实施例3\n[0040] 本发明第三实施例提出了一种搜索系统100，如图3所示，包括：\n[0041] 流量标识单元10：用于采用随机数对实验流量进行标识，对未采用实验标识的流量采用默认标识；\n[0042] 策略配置单元20：用于为所述实验标识和默认标识配置与其相对应的实验策略或默认策略；\n[0043] 广告检索和播放单元40：用于判定实验标识和默认标识，并响应客户端的展现或点击操作，生成携带所述实验标识或默认标识的展现日志和点击日志；\n[0044] 统计单元50：用于统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估。\n[0045] 本发明实施例提供的广告实验和发布系统100采用随机数分配实验流量，使得实验系统和线上系统合二为一，避免不一致导致实验结果不准确，另一方面，所述广告实验和发布系统100区别于现有技术，其不采用流量分配，从而支持实验策略从小流量到全流量的灰度发布，实现了线上系统中广告策略的平稳升级，可不限实验流量得到实验结果，具有安全可靠、维护方便的优点。\n[0046] 实施例4\n[0047] 本发明第四实施例提出了一种广告实验和发布系统100，其是在第三实施例基础上改进而来，其结构与第一实施例相类似，包括流量标识单元10、策略配置单元20、广告检索和播放单元40、以及统计单元50。\n[0048] 在本实施例中，广告检索和播放单元40一方面从策略配置单元20中分别载入实验策略和线上默认策略，在实际使用系统中，使用“tag->广告策略”的hash-map存储，另一方面，根据当前流量的tag，决定触发tag对应的实验策略或者线上默认策略，再返回广告并生成展现日志，此时携带的跳转URL是带有实验流量tag的加密串。\n[0049] 另外，在本实施例中，统计单元50用于统计所述展现日志和点击日志，完成实验策略和默认策略的对比和评估。具体地，统计单元50利用统计学算法统计带有tag的展现日志和点击日志，计算出相应实验策略的广告检索量（QV）、展现量（ads impressions）、点击量（click）、按点击付费的出价（costper click，CPC）、点击率（click-through rate，CTR）、广告位覆盖率（ads coverage）、千次检索收益（rpm）等衡量广告策略效果的重要评价指标。\n[0050] 本发明实施例提供的广告实验和发布系统100采用随机数分配实验流量，使得实验系统和线上系统合二为一，避免不一致导致实验结果不准确，另一方面，所述广告实验和发布系统100区别于现有技术，其不采用流量分配，从而支持实验策略从小流量到全流量的灰度发布，实现了线上系统中广告策略的平稳升级，可不限实验流量得到实验结果，具有安全可靠、维护方便的优点。所述系统100不只针对搜索广告，对于长尾广告系统同样适用。\n[0051] 上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。\n[0052] 通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质（如ROM/RAM、磁碟、光盘）中，包括若干指令用以使得一台终端设备（可以是手机，计算机，服务器，或者网络设备等）执行本发明各个实施例所述的方法。\n[0053] 以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视本发明的保护范围。