1954人阅读
网站开发（23）
原文：/article-740-1.html
随着互联网金融的持续火热，越来越多的银行纷纷发布了各自的互联网金融产品。但是互联网产品“高并发、大数据量”的特点却对于银行传统的核心系统架构带来了新的挑战。
1、互联网的核心技术特征
&当前互联网的核心技术特征主要可以概括为：分布式，易扩展，大量低端设备，底层开源软件。分布式结构可以通过平行扩展来支撑互联网上蜂拥而至的访问客户。同时，基于客户行为分析的大数据平台也需要分布式系统来完成，其中最典型的就是Hadoop集群。
&2、传统银行系统的技术特征
&传统银行系统的技术特征主要可以概括为：专用设备、底层闭源软件，成本昂贵，系统稳定。由于金融业对核心系统的稳定性、可靠性和安全性要求极高，目前大部分银行都是采用IBM的整体解决方案，并且几乎没有可替代性，IBM仍然保持着市场垄断地位。
&3、挑战主要来自客户体验的升级
随着互联网客户规模的增长，客户行为和系统响应次数也呈现爆发式增长。
&传统电子银行提供的是被动服务，产品只提供相应的功能，需要客户自己去查询和操作；而互联网产品更多的是提供主动服务，形象直观的展现客户相关数据信息。这就要求单个客户发起的或者产品自动发起的一次请求响应需要同时与核心系统的多个功能接口进行交互，再考虑互联网客户规模效应，其对系统的压力是非常大的，由此也会带来巨大的风险。
&4、产品设计应具备合理性
&大多数情况下，核心系统的架构是无法改变的。这就需要我们从产品设计和应用系统上尽量规避高并发交互响应的发生，但这绝不是以牺牲客户体验为代价来完成的。
&如果核心系统因为高并发量而出现瓶颈时，首先应当保证应用系统对产品的支撑，至少产品不能出现崩溃和给客户带来超出预期的失落感；其次，产品的异常提示内容也要足够友好，可以减少客户的负面情绪。最后，对发起请求的总量进行控制，可以采用临时输入验证码等方式来降低客户请求的频率。
&下面以“宜人贷系统架构”为例，宜人贷架构师孙军着重地分享介绍了宜人贷系统发展过程中遇到的实际问题和解决的办法，并重点介绍宜人贷出借系统和借款系统的高并发解决方案。
&二、宜人贷系统版本的迭代
&1.0&版本——简单的烦恼
迭代之前宜人贷的系统，其实就是一个前台，一个后台，一个DB，前台采用的是多级部署的方式。
软件也是跟最传统的软件一样分三层，第一层是Controller，第二个是Service，第三层是DB。显然这个系统并不适合互联网，有一些难以避免的问题。首先当用户过万，在线用户上线的时候，这样的部署方式会产生一些瓶颈，包括服务器和数据。第二个就是团队变大，所有开发人员集中针对同一个系统，冲突严重。
1.5版本——“吃大补”试试！
为了上面的问题他们做了一些修改，孙军把它定义成“吃大补”。吃大补通常有一个很明显的特点，就是立马见效，但是副作用也很大。
首先，他们在宜人贷的页面层更加关注性能，比如说浏览器，压缩传输，页面都经过了Yslow的优化，浏览层增加了CDN，做了静态化甚至反向代理，这样可以抵挡80%的流量。
页面层中间加了一个集群，这个集群基本上可以挡掉80%流量，最后系统把它业务垂直拆分成多个系统，比如说APP的后台，Web、信审、抓取、活动、报表等等。数据库也有一些变化，开始只是一台主机，一台数据库，现在变成了主从，一主多从。
&用户可以撑到过户百万，除此之外他们的制约在数据库，两套系统分别挡掉了4/5的流量，整体挡掉后其流量变成了以前的1/25，其实就是数据库并发能力来说扩大了25倍。但是他们的业务发展远远不止25倍，所以数据库依然是一个很大的瓶颈。
&再者、第二个问题就是团队划分，其实每个团队都做自己的系统，但是宜人贷仍然使用同一个数据库，这个时候比如说设计和修改数据库的时候，都非常麻烦。每次都要问一下其他团队，我这么改行不行，对你有什么影响等等。
&另外、第三个问题也非常棘手，大量使用了缓存，数据的时效性和一致性的问题越来越严重。我记得4月份的时候上了一个理财产品，它的库存多退了一倍，10点钟上线非常准时，但是发现问题之后把它下线，下了半天之后下不了，原因就是有缓存，非常难下。
&2.0版本——“开小灶”精细化
&为了解决1.5T，孙军他们需要做精细化的优化，他把它定义成开小灶。
&首先，合理划分数据归属、优化查询效率、缩短数据库事物时间；其次，分系统，每个系统用固定的表。从每天都在做的事中，让运维找出线上最慢的有哪一些，从而对它们做优化。第三，做去事物，或者尽可能的提升缩短事物的时间。
&然后、开始关注代码质量，提高执行效率，并且开始关注并发问题；用户达到这个量的时候，就会有有用户帮他们测试。打一个比方同一个用户用同一个帐户登录了两个客户端，他同时点进去，这个时候如果程序处理的不好，很有可能让他提两次。
最后，要区分强一致与最终一致，合理使用缓存与读写分离来解决这些问题。
&2.0性能问题解决很多了，还会带来新的问题——系统越来越多，系统间依赖关系变得复杂；这个时候很容易出现A调B，B调C的循环调用。第二个是系统间互相调用增多，上游系统压垮下游系统；第三个，也是非常头疼的问题，系统很多，查找线上问题变得越来越困难；试想一下当系统部署到很多机器上，想找一个线上的问题，通过查日志的形式非常难查。所以在这个基础上他们做了几件事，一是关于限流，限流通常基于两点：最大活动线程数(高消耗任务)，每秒运行次数(低消耗任务)；
&活动最大线程数适合于高消耗的任务，然后每秒运行次数适合于低消耗的任务（这里应该是针对请求接口次数做的限制吧）。 二是一个建议，他建议尽可能统一内部系统间返回值，返回值中一定要记录返回状态（业务正常、业务异常、程序异常）和错误说明；第三个，可配合RPC框架完成限流工作。
再说一下关于查找问题，宜人贷日志系统部署框架，最左侧的是他们的业务系统，在业务系统上把日志搜集到卡夫卡队列，最终采用Kibana和他们自己研发的系统去查看日志，日志到了一个集中点不容易找，而这样就更好找了。
&关于软件方面，宜人贷统一使用slf4j+logback输出日志，然后日期系统做到日志串联，所有服务端和客户端之间都隐藏的一些参数，这些参数会随着调用链一步一步往下传，通过AOP来实现，日志串联需要传递哪一些参数，或者日志中到底要打哪一些参数呢？第一个是时间，这个时间应该到毫秒级，第二个是流水号，流水号就是每次请求升华到唯一的一个P值。然后是设备号：时间（到毫秒）、流水号(uuid，每次请求生成唯一值)、用户session、设备号、调用者时间（APP使用手机本地时间）、本机IP、客户端IP、用户真实IP、跨越系统次数——有了这些找问题就非常容易。
&做到2.0之后，宜人贷的网站基本上到了中大型的网站，短时间内不会有太多的性能问题了，但是他们肯定还得继续往下走。
&3.0版本——拆分做服务化
&3.0总结下来就是要做服务化，通俗一点说就是拆分，包括垂直拆分，充值拆分基础上系统之上的水平，那么服务化要怎么做呢。
首先，做业务拆分的时候，可以按照基础服务和业务服务先做一个大的服务的拆分，然后基础服务又包括无业务型的基础服务和有业务型的基础服务，这些系统非常明显的跟其他的系统没有太大的关系。业务型基础服务的特点就是跟业务之间的关系很小，就是这些系统跟业务系统之间的关联关系只是主键和外键的关联关系。
宜人贷可以天然地拆卸分成两大系统，一个是贷款业务，一个是理财业务，贷款业务可以拆卸成后台、Web、合作渠道，这个系统之下会有一个基础服务，就是提供一些基础服务和接口的一个系统。
&基础服务拆成了两部分，一个是基础服务的进件，一个是服务售后。然后拆分过程中他们又发现一个问题，理财和贷款有两个业务怎么拆都拆不开，就是撮合业务和债券关系，这种拆不开的可以单独再提升一个功能服务来提供服务就可以了。
拆分的系统看起来好像很容易，拆分的办法孙军总结了如下几个：
&第一，适当冗余，冗余确保数据库依然可以关联查询；大部分时间并不是做一个全新的系统，而是在原来系统之上做修改，这个时候可以做一些冗余，保证他们可以不修改。
&第二，数据复制，但必须保证数据归属系统有修改和发起复制的权限；这个比较适合于刚才说的全局配置，比如说宜人贷的所有公司都会有这么一个集成表，记录了全国的区线，这些在每个系统中都会用，不一定每个系统都以接口的形式调用他。可以在每个系统里面都冗余。
&第三，就是如何验证数据库——并不一定非把它拆分成两个验证它，可以一个数据库上建两个帐号，这两个帐号分别的权限指向拆分之后的表，可以通过帐号直接验证拆分效果。
&第四，提前规划服务，拆卸之前确定一下区分读多、写多服务，区分快请求、慢请求服务，不同服务需要分开部署。
&最后，同一数据不能由超过一个以上的系统控制，同一系统不能由超过一个以上的负责人负责。
&4.0版本——云的展望
做到以上几点，&3.0版本已经做的差不多了，但是后面宜人贷依然还有很多要做的，4.0版本是不是要做云平台，异地部署的方案，表很大的时候是不是要做垂直拆分，去IOE或者使用Docker快速部署等等这些，这些其实都是我们做4.0或者5.0将来要考虑的事情。
&三、宜人贷理财系统的优化
&合理预估流量——强一致与最终一致
图中这三个界面分别为首页、列页，详情页。
首先要合理预估流量，区分出什么是强一致性的流量，什么是非强制性的引流。
评估方法一：平日PV*(24/热度时间)；
评估方法二：热度时间内在线用户数*平均每人操作次数/热度时间。以宜人贷理财端为例，他们在高时期有2万人，然后平均做20次操作，在2分钟左右基本上就把所有的债券抢光了，翻番出来大概是3000多次每秒。
然后要区分什么是强一致，什么是最终一致，这两个流量分别是多少。强一致这个数据必须是最准确的数据，这个数字不能用读写分流的形式保留，必须是正确的数据。最终的数据就是时效性没有那么高，只要最后的结果是一致的就可以。
20次操作包含：注册、注册验证码、登陆、解锁手势密码、首页、浏览产品列表等等这些操作，这里面其中有一些比如说产品余额、生成订单、支付短信、付款，这些都是非常强一致的要求，这个大概占每个操作数的占1/7左右，翻算出来是约500次/S。
针对最终一致的方案非常简单，增加机器就可以解决，时效性较高的可以直接使用数据库的读写分离，增加应用服务器，处理更多的并发； 实时性较高使用读写分离方案、缩短catched时间；实时性较低的可以使用较长时间catched。
强一致性的流量处理方案，总的来说就是加速，可以使用数据库的锁，也可以使用ZK，或者直接使用排队的机制，这里面数据库的锁，基本上变化在2000次每秒以下。在这个情况之下，完全可以使数据库的锁来防止并发，第一个方法就是有事务的防止并发的方法。
然后再更新共享资源，最后再查询一次共享资源，然后判断一下结果。假如说这个结果是成立的，就直接运行，假如说这个结果是不成立的，那么再做。第二个就是无事物下的方法，加一个条件去判断他们的资源成不成立，当没有更新成功的时候，就返回。
如果流量依然承受不住该怎么办？
做到这些其实已经能够承受非常大的流量，但是业务可能继续发展，还承受不住怎么办呢？
首先的一个原则就是没有任何分布式的操作，最好的方法就是单点、排队处理。
第二，单点并发过大，使用合适的方式拆分锁的粒度；比如说产品12月期的，增加一个9月期的，6月期的等等。比如说增加这个还不够，能不能按省卖他们的产品，每个省有一个自己的库存，粒度会很多。
&第三，增加降级需求，不影响用户正常使用情况下可以适当降低服务质量。适当修改需求、适当增加用户等待结果时间；如果让用户等2秒，是不是能撑到4400每两秒，答案是肯定的，可以多让用户等一段时间，这个交互上让用户有更好的体验。
最后适当调整运营策略，分散用户集中活跃时间。
参考知识库
* 以上用户言论只代表其个人观点，不代表CSDN网站的观点或立场
访问：3780204次
积分：28684
积分：28684
排名：第132名
原创：217篇
转载：376篇
译文：178篇
评论：351条
(1)(5)(53)(31)(60)(2)(8)(2)(6)(1)(2)(1)(7)(3)(7)(7)(7)(8)(7)(21)(45)(7)(8)(33)(17)(248)(97)(88)(1)深度好文：互联网金融如何做好流量？
作者: 刘渝民来源: 站长之家 20:30:07
互联网金融获取流量的成本越来越高，如何做好流量工作？笔者将从P2P流量现状，做流量的阶段和规划，主流推广渠道操作方法逐一阐述。P2P流量现状从早期的有利网，积木盒子跑马圈地，到前两年ppmoney猛砸做流量，再到今年借贷宝狂砸20个亿，并大举进入央视广告，p2p做流量的方法不断在变，由于市场火爆，为了快速获取流量并赢得一定的品牌知名度，传统电视广告、分众广告、地铁等品牌广告依然是最好的选择。比如e租宝狂砸品牌广告后，其百度搜索指数高达3万，借贷宝更是高达8万。相比单纯的数字营销，品牌广告能形成一定的从众效应与品牌印象，后期的用户活跃度和贡献度较高，但成本高昂不可控。现在P2P企业做流量的策略我总结为五种：一、流量派。典型的如福建派，ppmoney算其中之一。我们知道福建最有名的商会是莆田商会，一统全国民营医疗，其必杀技为数字营销。依托于搜索引擎，将SEM+SEO+导航+网盟发挥到极致。优点：用户非常精准，流量的级别也非常大，可控性佳，是目前性价比最好的流量操作方式之一。量级：做得好一年能获取10万种子用户，能满足大平台操作难度：★★★★缺点：缺乏品牌效应，且不能应付大型的促销活动和公关事件，比如某企业需要开展一个双11金融节，光靠数字广告不行，数字广告大多需要竞价，要在短时间突然获取大量流量，必须提高CPC，成本会很高。最好的方式就是购买各类品牌展示广告位，固定价格，划算。二、全触点轰炸。典型像vivo，借贷宝。传统线下品牌广告+线上数字营销+社会化营销。这里简单介绍下偏线下和偏线上做流量的区别：偏线下做流量的方法：分众传媒+电视+网络视频+公交+车站+地铁+飞机场核心目标：市场扩张，快速提高知名度特点：渠道为王，一般有代理商，存在线下最后一公里行业：汽车类，消费决策难；快消品，所见即所买偏线上做流量的方法：搜索+门户+网络视频+社交媒体+事件营销核心目标：拉种子用户，积累粉丝，培养用户粘性，快速迭代产品特点：用户为王，标准化，一般不存在线下最后一公里行业：互联网，消费决策容易，没有明显的区域性，时间性社会化营销也是全触点轰炸重点关注的，比如e租宝的媒体公关，事件炒作都是做的比较细致的。优点：知名度快速提升，拿融资前必做，近期华南地区的p2p风向标小牛在线正在全力塑造品牌，期待其上市成功。量级：大媒全覆盖，忘了大媒第一这句话吗？过亿用户也不稀奇操作难度：★★★★缺点：没这么多钱啊。三、传统派。主要操作方式就是电视广告，媒体公关，有些p2p公司的市场负责人来自快消品或商场等传统行业，思路还是停留在传统的市场推广方法，这种操作思路有一定的弊端。一方面线下做品牌，流量线上被截取（参考我之前写的你累死累活做品牌，我偷偷摸摸抢流量）；另一方面媒体公关的作用正在衰减，既不能带来流量，也不能赢得用户的信任，毕竟这东西大多也是花钱搞的，用户不傻。优点：能提升知名度，有一定的品牌塑造作用量级：大，传统品牌广告覆盖人群依然很大操作难度：★★缺点：不符合互联网企业，性价比差差差四、创意派。p2p企业做创意的比较少，像平安壹钱包之前做过一键呼叫uber拿一个亿体验金成为一时热门，现在逐渐成为各家平台吸引新用户的噱头。悟空理财玩粉丝营销也做的不错。创意派主要做法就是炒作各类事件，制定各种噱头的主题活动，玩社群营销等。创意营销一般要经过以下几个步骤：1、数据分析，产品研究，竞争态势，找准产品的核心用户群2、用户调研，挖掘核心用户群各类属性，寻找场景3、根据核心用户群属性，制定品牌调性与传播策略4、制定各类主题活动，依靠创意与互动分享传播出去总体来看，这玩法难度真不小，不招几个4A人才恐怕HOLD不住，资源需求也不小，表面一看，好像是不需要花钱的做法，其实人力和资源要求很高，所以一般玩创意的反而是大企业，倒不是他们不舍得花钱，这与公司的品牌策略和市场负责人的操作思路相关。好吧，我又狠狠的抽了小公司流量运营负责人一记响亮的耳光！好不容易想到一个省钱的办法，做创意拉用户，谁知道搞创意成本也不小啊。往后看，绝对是小公司福音，叫我雷锋。优点：传播快，用户质量高量级：一般，很多时候都是圈内人在参与操作难度：★★★★★，写少了你们会被老板虐缺点：太单一，平台发展跟不上五、技巧派。用最少的钱，获取最多的曝光。写一篇软文，通过微信大号传播出去，也能获得很多优质用户。像之前的51信用卡，通过微博制作一个男友出门手机必备软件一下子走红了，流量蹭蹭上涨。再比如购买竞品的品牌词，截取其用户，或者通过优化，提升APP在APPSTORE的排名，能获得大量的曝光，这一块量级也很大，而且用户也精准。后面在主流推广渠道的细节操作深入阐述。优点：花钱少，办事多量级：挺大的，只有做了你才知道操作难度：★★★★缺点：你不会怎么玩P2P流量现在主要向移动端转移，主要是因为用户的使用习惯在移动端，尤其是APP。从用户行为抉择来看，大多用户通过PC和无线搜索进行信息抉择，最后一部分用户会留在PC进行投资理财，大部分用户留在APP进行投资理财，少部分用户会在微信端投资理财。所以在一段时间内，PC和WAP以及APP会共存，其中PC和WAP承接品牌与信息展示，APP承接应用搜索展示，PC和APP共同承接用户投资理财，WAP几乎不承接用户投资理财。综上看来，移动端流量会越来越重要，迅速布局移动流量迫在眉睫。互联网金融负责流量的一般有三块，分别为线上推广（SEM、SEO、各类付费广告平台、ASO）、商务合作（换量、异业合作）、线下推广（地推），这里没有提及品牌广告，主要是品牌广告往往直接放在品牌部执行，如电视、地铁、影院广告等。其中流量的主要来源于线上推广，商务合作更大的意义在于露脸，通过与各类知名企业合作，借势提升自己的市场声音和品牌形象，而线下推广由于操作难度与可复制性导致各平台重视度均不足。下面针对这三块，从团队配置、阶段目标、核心策略三个方面进行规划。
打开微信“扫一扫”，分享给朋友和朋友圈
两周内免登陆
电商服务推荐
上海云贝网络科技有限公司
客户关系管理CRM国内互联网金融平台做的比较好是哪家？_百度知道风险相当但收益率较高：中国互联网金融美好交易是真的吗？
谁不喜欢的收益率，特别是如果在风险相同的情况下？&
这已经成为中国消费者近来一直面临的情况——至少是许多人以为他们所面临的情况。&
如、和推出的那些互联网基金，引得投资者们竞相购买，这有几个原因：第一，利率与别处提供的利率相比通常较高；第二，风险被认为与同类银行产品相当：其投资得到了这些公司有效担保，而且人们普遍认为，科技巨头腾讯和阿里巴巴与大型国有银行一样，不可能破产倒闭；第三，便利：上网的人数远远超过其他任何国家，而且许多购买交易是通过智能手机进行的。主流银行也提供这个选项，但他们通常设有最低投资门槛，而网上银行则没有这项规定。
目前有传言称，网上银行可能会面临那些在城市繁华街道设有分支银行的大型银行所没有的各种交易风险：一些媒体报道已经列数了把资金转到错误的账户或干脆在网上消失不见等情况，但这些担忧似乎被夸大了，而且至少已经基本被渴望多赚些钱的投资者抛在脑后。
但在中国，变化可快速降临。这并不是说有什么事会立即发生，但是当政府感到受到外界影响威胁时，那么调控措施肯定会很快随之推出。
就以微博为例。在2009年上线后不久，微博迅猛发展，变成非常受欢迎，以至中国的媒体格局几乎在一夜之间迅速改变。不久，新浪被迫从内部进行广泛的审查控制，以此安抚政府，但言论不再自由。
首先，各级官员奉命设立微博账户，与人民直接互动，不过这些帐户许多很快就无人照管。但无论是官方账户，还是与官方论调更为一致的大批用户，都无法阻止不和谐言论形成气候，因此当局采取了一种不同的策略。
正如在中国的行事方式，杀鸡儆猴。在这种情况下，一些知名度高的微博账号（所谓的“大V”）成为了打击目标，这个办法奏效了。近几个月来，新浪微博已经被“净化”，以至于用户成批离开这个平台。目前在中国，腾讯的微信是用户首选的社交媒体平台，但如果那里的言论变得太出格的话，那么当局将会采取措施来平息事态。
这就是在中国情况会迅速变化的一个例子，同样，互联网金融产品如此迅速地取得如此大的增长也不应令人感到惊讶。中国股市已经历了长达五年的重挫，而房地产市场对于许多投资者而言又是遥不可及，投资选择一直有限，而且远远缺乏吸引力。
主流银行已经被迫通过尽可能提高存款利率来应对这个新的挑战，但3.3％的存款利率与互联网上提供的收益率相比根本不算什么。这就是监管机构介入的地方。
最近中国央行的一系列举措已经使得虚拟信用卡和二维码支付服务在可预见的未来被禁，这意味着各大银行仍介于商户和客户之间，而不是被撇开。银行自身也对客户可以向这些支付系统转入多少资金加以限制，此举也会遏制整个系统。此外，中国央行还在考虑对交易总数加以限制，这又是一个保护银行之举——银行正在以惊人的速度失去业务。
但长江商学院金融教授陈龙表示，监管机构应该支持——而不是扼杀——互联网金融。陈龙也承认，该行业目前需要更多的监管，以防止掠夺者未来进一步引发潜在的灾难，但他认为，这些类型的金融产品的创建恰恰会有助于促进和推动中国的金融改革。
当这些改革发生时，格局会再次发生巨大变化。但正如在其他领域所看到的那样，你可以预期科技公司将重新调整，把他们的下一步计划付诸行动。与国有部门的迟缓拖沓相比，科技公司在战略调整上将如风驰电掣般迅速。只要当局允许，这些计划将会持续下去。
译 陈玮 &校 徐笑音
本文来源：福布斯中文网
关键词阅读：
不做嘴炮 只管约到
跟贴热词：
文明上网，登录发贴
网友评论仅供其表达个人看法，并不表明网易立场。
热门产品:　　　
:　　　　　　　　
:　　　　　　　　　
热门影院：有哪些做的比较好的互联网金融产品？_育儿问答_宝宝树
有哪些做的比较好的互联网金融产品？
当时年龄：}