HBase新特性—Stripe Compaction - 为程序员服务
HBase新特性—Stripe Compaction
借鉴于LevelDB、Cassandra的Compaction方法，https://issues.apache.org/jira/browse/HBASE-7667 提出了Stripe Compaction的方法。
Motivation：
1）过多Region会增大RS维护的开销，降低RS的读写性能。随着数据量的增大，在一定程度上增加Region个数，会提高系统的吞吐率。然而，RS上服务的Region个数增多，增加了RS下内存维护的开销，尤其每个Store下都配置有一个MemStore，从而会造成频率更高的Flush操作，影响系统的读写性能。因此，如果能够提出更轻量级的mini-Region，不仅能够降低服务多个Region的开销，而且能够提升读写数据的效率。
2) Region Compaction容易”放大”。例如，Region区间为[1FFF，2FFF）,在该区间内仅有[1FFF，21FF)区间有大量的写操作(put、delete)，但是,在触及MajorCompaction条件时，却需要对所有的文件执行Major Compaction，从而引起大量的IO。
3) Region Split操作代价较大。
需要了解之前HBase的Compaction与Flush过程，可以参考： 以及
Stripe-Compaction设计的核心思想：
1）对于Region下的rowkey区间进行二次切分，例如[1FFF,2FFF)，切分成[1FFF,24FF),[24FF,2FFF)两个区间，每个区间成为Stripe。
2）Region下的数据文件分为Level-0和Level-1两层。其中Level-0主要用来存储临时的数据文件(例如使用bulkload或者执行mem flush操作之后的数据)， Level-1层的数据是按照Stripe的分区来区分。
3）支持两种方式的配置：Mini-regions的个数设置、或者以Size-based为大小触发因子的自动切分机制。
4）容错机制。如果在Stripes之间存在空洞。那么可以根据在Store当中的设置，将所有的处于Level-1层的文件回归到Level-0重新进行compaction。
5）Get操作时，一个Row所涉及到文件有：MemStore、Level-0下所有文件、以及Level-1下对应Stripe区下的文件。根据Stack的意见，最终Level-0下的文件只是一个暂时的状态，大部分文件都位于Level-1 Stripe下，因此，这样随机读时，需要涉及到的文件更聚集。
6）Scan操作时，需要定位startrow即可。在扫描过程中，会按照Stripe的row区间的排序，依次进行。
7）Compaction，是Level-0上升到Level-1的过程，同时，在Level-1层次的数据，也会进行相关的合并。
8）在Split操作时，定位Rowkey区间的中心点，可以根据Stripe记录的位置，进一步查找，因此，使用预置的Stripe会有利于Split操作的进行，可以实现多数HFile文件直接拷贝到子Region目录，从而加快了Split操作的效率。
下面对于Cassandra以及LevelDB中使用的多层次Compaction算法做一个介绍。
1)分层式压缩方式将数据分成条个层，最底层的叫L0，其上分别是L1，L2….，每一层的数据大小是其上的那一层数据最大大小的10倍，其中最底层L0的大小为5M (可以配置)
2) 当level层次大于0时，同一层的各个文件之间的Rowkey区间不会重叠。所以在level n与level n+1的数据块进行合并时，可以明确的知道某个key值处在哪个数据块中，可以一个数据块一个数据块的合并，合并后生成新块就丢掉老块。不用一直到所有合并完成后才能删除老的块。
3）整体执行流程是从L0-&L1-&L2，依次合并的过程，如下图所示。
由上图，我们可以得知，越是level较低的块，它的数据就越新，在满足向下归约合并的过程中，就会按照文件的Rowkey的区间，进行合并，去除多余的版本，或者执行相关删除操作。因此，在读请求最极端的情况下，从Level0开始读数据，一直读到最下层Level n。
这种Compaction的优势在于：
1）大部分的读操作如果有LRU特性，都会落入较低的Level上。因此，数据越"热"，Level就越低。从而有利于未来HFile多种存储介质的定位问题。
2）在合并的过程中，仅需在由上到下的部分文件参与，而不是要对所有文件执行Compaction操作。这样会加快Compaction执行的效率。
劣势在于，如果层次太多，在递归合并的过程中，容易造成某个区间的Compaction风暴，影响该区间数据操作的吞吐。
因此，HBase-Stripe Compaction的方案中，只有两层，Level 0和Level1，这种方法在保留分层压缩的优势的同时，降低了总文件个数，有利于RS执行Split、Merge等操作。
参考文献：
[1] HBase-7667 https://issues.apache.org/jira/browse/HBASE-7667
本系列文章属于在个人技术博客原创，原文链接为,未经允许，不得转载。
From , post
文章的脚注信息由WordPress的自动生成
Copyright & 2008 This feed is for personal, non-commercial use only.
The use of this feed on other websites breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint: )
平静的力量
原文地址：, 感谢原作者分享。
您可能感兴趣的代码20款最流行的响应式jQuery插件
本文将例举最流行的20款响应式jQuery插件，开发者可以从中挑选出最选合你网站的一款。
Lettering.js是一款漂亮的jQuery排版插件。它取代了传统的排版方法，包括网站中的排版字体。
与Google相仿，利用该插件，可以在你网站中增加搜索框，帮用户搜索出他们期望查询的内容。Typeahead.js由Twitter开发。
Stellar.js可以向任何滚动元素增加视差滚动效果。
该插件可将标准的滚动条转变成时尚、光亮的滚动条。你可以根据需要修改滚动条的颜色。
DropzoneJS为开源库，提供拖拽文件上传功能，并伴有图片预览效果。
FittextJS在显示屏上显示大号文字方面做得十分成功，它支持自动调整文本大小功能。在FittextJS推出之前，Web设计者常用图片来显示大号文字，它无法实现不同尺寸屏幕间的响应式显示。该插件很好的解决了该响应式问题。
Swipe为一款完美的响应式幻灯片，适合于在网站头部下面显示全屏宽度的幻灯片。
FlexNav可能是制作响应式菜单最完美的jQuery插件。易于创建，易于个性化是它主要的特性。
Flexisel是一个jQuery“旋转木马”插件，其尺寸能够自适应移动设备的屏幕。
该插件可以预加载网站中的所有图片，从而提升网站整体加载速度。对于图片库类的网站，强烈推荐使用。
Magnific Popup为一款免费的响应式jQuery Lightbox插件，专注于性能和为使用不同设备的用户提供最好的体验。
Tiny Circleslider是一个轻量级的环形滑块/旋转木马jQuery插件。
利用Google Map API V3，在地图上增加多个标识物，将变得很简单。当你有一系列数据，需要同时显示在地图中，可以利用该插件。
这是一款非常酷的幻灯片播放插件，可为网站提供各种不同的过渡效果。
该插件可以将小型音频播放器整合入网站中，用户可以在线听音乐。
该插件用来高亮显示正在产生对话的网站链接。
一款轻量级插件，用来检查表单、DOM树中的文本输入。对一些内容的创作者十分有用。
Any List Scroller插件能够根据任何内容、任何尺寸、任何列表产生可滚动效果。
jQuery Stripe插件可以创建出十分酷的叠加式的画廊展现效果。
该插件主要用于响应式设计。该插件的容器每次会重新计算尺寸，列表中的项目数会根据容器的新宽度重新设定。
原文来自：
20款最流行的响应式jQuery插件大家对应该很熟悉了，用户可以使用 Shopify 自己打造产品的电子商务网站，丰富的模板选择、简便的操作和基本的插件让其用户猛增。但今天给大家介绍一个为 Shopify 等电子商务平台提供更加丰富插件API的云计算初创公司 - 。
Moltin 主要是为了给电子商务网站提供更多的API和插件，比如提供30多种的线上支付服务API：PayPal、Stripe、WorldPay和 SagePay 等，又或者是价格对比的API插件，能够显示出用户的产品价格与亚马逊和 eBay 的直接对比。除了网页端的优化之外，Moltin 的API也同时适用于移动端，以帮助用户提高消费者的移动购物体验。
Moltin 现在有14天的免费试用期，之后将为用户提供三种会员模式，费用分别为每月20欧元、50欧元和120欧元，价格基本和 Shopify 相同，用户可根据需求自行选择。原创文章，作者：
分享到读者no fate but what we make
赞助商链接
拉卡拉获 15 亿元融资，估值已超过百亿 拉卡拉董事长兼总裁孙陶然端午节前发给拉卡拉全体干部的邮件中宣布公司获得15亿元融资，市场估值超过百亿元。拉卡拉此次融资的投资方包括太平人寿、中国再保险集团、大地保险、民航发展基金等机构。
传携程砍掉艺龙机票团队 在携程收购艺龙一个月后，近日正式启动对艺龙的内部整合，艺龙机票产品团队成为首批被砍对象，“愿意继续留任的会被调到携程，不愿意的则自动离职，并按N+3的方案赔偿。”
Craigslist 回购 EBay 所有的 28.4 % 的股份
EBay公布同意分类广告公司 Craigslist 回购 EBay 所拥有的28.4% 股份，并结束之前的诉讼，但具体的售卖股票金额并没哟对外公布。Ebay 是在 2004年购入 Craigslist 的股份。 2015年下半年，Xbox One 或接入 Cortana
在 E3 2015 上，微软最大的一个变化是将要在 Xbox One 上采用 Cortana，那时将会有一个全新的仪表盘设计，同时也会融入Cortana 。 Uber 或将获得华尔街 20 亿美元贷款
据 WSJ 的消息，Uber 上个月寻求的 10亿美元的信贷额度已经被翻了一倍，接近 20 亿美元，这其中背后的原因是有更多的银行想要加入其中，目前感兴趣的银行有摩根斯坦利、美国银行、巴克莱银行、花旗集团、德意志银行、高盛集团、汇丰银行、摩根大通和太阳信托银行等。 Facebook、苹果前任工程师将任 Pinterest 核心体验主管
和 Apple 的前任工程师 Scott Goodson 将担任 Pinterest 的核心体验主管（Head Of Core Experience），负责管理移动平台和网页团队，专注于优化 应用跨平台运行的性能。
苹果或将停止出售第一代 iPad mini 9to5Mac 注意到，苹果已在官网和实体店下架了第一代 iPad mini ，用户无法购买设备，但其仍支持 新系统 iOS 9。第一代的 iPad mini 是唯一不配备 Retian 屏的 iOS 产品，目前，iPad 大家庭已有 iPad mini 2，mini 3，Air 和 Air 2。
Google 推出独立时钟应用 Google Play 上架了独立的时钟应用，同时还推出了独立的 Google Now 应用。自去年 4 月起，Google 已将系统预置的应用转变为选择性下载的独立应用，其中包括 Gmail、Maps、Messenger 和 Calendar，有利于为原生安卓机减负，也可以把非原生安卓机纳入 Google 的生态系统。
易到发布端午声明，回复近期流言 在易到的端午节声明中，回应了近期关于大规模裁员事件，称裁员属于公司业务范围内的正常人员流动，同时“裁撤海外事业部”事实上是易到海外业务的模式升级，特成立商业变现部门，并创建销售中心，已与蓝色光标等多家4A广告公司和众多渠道展开密切合作；同时将全国业务重新划分全国8大区域，各大区和城市可独立运营等。上市次日，Fitbit 股价上涨9.5%上市第二天，Fitbit 股价开盘 31.16 美元，报收于 32.5 美元，上涨 9.5 %。上市首日，Fitbit 从 20 美元每股涨至 29.68 美元，幅度达 50%。一开始，Fitbit 对 IPO 集资的预想金额是 1 亿美元，而真正 IPO 时，Fitbit 的融资总额达到了 7.315 亿美元。小米在印度投放首个平面广告 小米全球副总裁雨果·巴拉周五在Twitter上称，小米在印度的首个平面广告已经出手：买下《印度时报》整个头版，推广米4。与中国不同，印度购物者比较倾向于在实体店购买手机。推出平面广告，也是在印度因地制宜的做法。小米方面称，日后还会有更多的营销选择。
部分27寸iMac 3TB硬盘驱动器存在故障，苹果公布免费更换计划 苹果（Apple）宣布，将为少数使用 3TB 硬盘驱动器出现问题的 27 寸 iMac 进行免费更换。苹果没有提到确切的产品编号，只是笼统地表示，这些产品集中在 2012 年 12 月至 2013 年 9 月之间售出。苹果将通过产品的有效注册邮箱，找到存在这一问题的 iMac 所有者。
国外的家校管理工具 Remind 拓展新功能
在今年 5 月份，Remind 拓展了功能，允许老师与学生进行即时的通讯，而在此之前，老师和学生之间只有单向沟通机制。此次，新功能进一步放开了内部沟通的机制，允许校方和老师在产品内互相发讯息。Remind 是硅谷的明星在线教育产品，用户数已经超过 2300 万。 培生向 Vista 出售 PowerSchool，售价3.5亿美元
培生今日向 Vista 出售旗下学习信息系统 PowerSchool，主要针对的是 K2 市场。2014年
PowerSchool 覆盖 73 个国家的 1500 万学生，为培生贡献了9700万美元营收，2000万美元净利润，此次出售是培生想要更加精细化自己的服务。众安在线融资 9.34 亿美元，估值达 80 亿美元作为阿里巴巴子公司蚂蚁金服旗下的品牌资产，众安在线成立时间不足两年，是中国首家在线保险公司。近日，众安在线获得 9.34 亿美元融资，估值将达 80 亿美元。本轮融资中，投资方包括摩根士丹利、中国国际金融有限公司、鼎晖投资、凯思博投资和赛富合伙人有限公司。此次投资已获得中国保险监管机构的认可。众安在线创立于 2013 年 11 月，其最大股东是阿里巴巴的子公司蚂蚁金服。该公司从承保到索赔结算的所有业务都在网上展开，没有任何实体经营机构，
欧盟宣称要重罚谷歌来自 Bloomberg 的消息称，欧盟委员会指控谷歌在比较购物市场上排挤竞争对手，并宣称要对谷歌课以重罚，罚款金额会高到产生威慑作用。对谷歌的罚款金额与以下因素有关：谷歌 AdWords 服务欧洲营收、价格对比网站营收和来自搜索引擎产品查询的收入。欧盟认为，谷歌在搜索结果中偏向自家比较购物服务，构成滥用其在通用搜索服务领域主导地位。
蚂蚁金服已完成新一轮融资，估值或超 450 亿来自《金融时报》的消息称，蚂蚁金服已完成新一轮融资，估值约为 450 亿至 500 亿美元，将成为全球估值最高的私营科技公司之一。蚂蚁金服拒绝披露此轮融资的融资额以及出售的股数。马云此前曾表示，蚂蚁金服计划在国内上市，但拒绝透露具体的时间安排。有媒体报道称，可能的一个时间点是 2017 年秋季。
微信公众平台发布整治“赌博类”信息公告 微信公众平台一直在净化公众号内容环境方面下力颇多。继打击内容抄袭、整治非法分销模式行为后，微信公众平台刚刚宣布推出整治“赌博类”信息公告。根据公告，对发送包括但不限于组织聚众赌博、出售赌博器具、传授赌博（千术）技巧、方式、方法等内容进行清理，对相关帐号做永久封禁处理。截至目前，已累计永久封禁赌博类帐号5万余个。
京东 618 超 1500 万单，同比增长超 100% ， 移动端占比超 60%
京东 12 周年 618 店庆大促成绩单：6 月 18 日（00:00-24:00）当日下单量超过 1500 万单，相比去年同期增长超过 100% 。其中，移动端订单量占比超过 60% ；服装鞋帽类下单量位居所有品类第一；京东闪购（名品特卖）订单量为去年同期 30 倍。从 6 月 1 日到 6 月 18 日，手机销量超过 416 万部。智能产品在 618 当天总销量同比增长 7.5 倍，小米手环销售超 4.5 万个，为销量冠军。京东支付完成 80% 的在线交易以及所有的线下货到付款交易；京东白条 60% 交易来自移动端；拍拍平台下单金额同比增长超过 200% ；618 当天京东到家订单金额达到平日的 5 倍。Google 欲收购 Tesco Clubcard 背后数据公司 Dunnhumby 据 Sky News 消息，Google 将与 Permira 合作注资 Dunnhumby。本次收购正值 Tesco 意欲精简自身业务，Dunnhumby 此前负责运营 Tesco 的会员卡服务，追踪消费者购物喜好与数据。收购金额或为 20 亿英镑，竞购对手还有广告集团 WPP。What: HIVE 是一个帮用户发现全球实习、义工和兴趣实践机会的平台。 How:它搜集了各类游学产品供用户挑选：去泰国体验新型哲学式农业、去谷歌和哈佛访问交流、去尼泊尔孤儿院做义工、去西班牙做斗牛保姆......目标用户是 18 至 30 岁的年轻人。Think It Twice:其实，重“游”轻“学”，看中的是其实是出境游这块市场。What: “0过户”二手车。 How:模式类似于好车无忧和人人车，只是其亮点是主打“0过户”二手车。因为在汽车销售中，每转手一次汽车就要过户一次，0过户就意味着这是一手二手车。同时车辆每转手一次，车况和车价都要相应下降，0过户可以帮车主卖个好价。另外CC车还有品牌认证车，即4S店的置换二手车。Think It Twice:0过户不利于CC车在前期铺量，车主不一定因为CC车的“0过户”概念而把车拿这儿来卖，而更可能选择一个大平台如人人车或好车无忧。What: 深度星座社区。 How:“测测”从工具属性的“星座运势”入手，向社区切入。在工具方面，“测测”以星盘、二十八宿和紫微斗数为测评维度；在社区方面，“测测”将采用UGC+PGC 的方式，邀请占星师入驻，也鼓励用户之间的沟通探讨。Think It Twice:由于“星座”本身的话题性较强，同时也与用户的生活点滴相关性强，因此，从“星座”切入社区较为合理。另外，在工具方面的专业性较高使得用户切得比较准，粘性也不错。What: 百度文库出品，基于地理位置推荐所在考区最热门的知识点以及相关试题。 How:利用百度文科过往积累的真题，同时结合已有在大数据搜索方面优势推出的题库产品，帮助高三学生冲刺高考。目前主要以知识点的形式排列，并且仅上线了数学单一学科。Think It Twice:虽然喊着题库的口号，但是做题这件事情并没有真正意义载入，仅是以瀑布流的形式展现真题，学生数据并没有得到积累。百度在K12领域还布局有作业帮，但是一款拍照搜题类+UGC答题类产品，是否能够整合推出真正意义上的题库产品，存疑。What: 蓝牙追踪器。How:将防丢器挂在或者贴在要追踪的产品上，与手机连接，双向追踪；同时还可以做为自拍“遥控器”，控制音乐播放和苹果电脑上的幻灯片。Think It Twice:产品外观做到了超薄，体验上作了优化。在国外，用户和市场接受程度高，但有Tile这样的品牌，很难挑战；在国内，产品同质化严重，竞争激烈，如何增强渠道和销售能力就是关键。What: 一个兴趣图片标签社区。How:玩法上并没有比其他图片社区有太多创新，但引导用户晒的是“玩具”。 手办、高达、玩具车、相机等等。Think It Twice:很强化“标签”的玩法，玩出了不少花样。在内容页内“标签即评论”/可直接点赞标签、根据点赞数量排序标签。很有意思。What: 同乡社交、社区。 How:用户可以在这里找到附近的老乡（精确到地级市的区），用户可讲句方言语音验证自己的身份。此外有很多跟乡土有关系的社区频道，比如家乡奇葩特产，跟方言有关的语音贴纸频道等等；还有一个轻游戏专区让用户打发时间。Think It Twice:But，我并不认变家乡是连接人的点——来自同一地方的人口结构特点本身非常复杂，特质不均匀——当然如果能够选择密度高、特质均匀的工厂场景的话，觉得还是有潜力的。What: 指纹加密存储设备。How:将设备连至电脑，通过配套软件设置后，可以用十指指纹分别管理不同账号的密码。同时，存入设备的信息将自动通过AES 256Bit算法加密，暴力无法破解。产品外观可以定制，激光刻字、图片等，满足一些个性化的需求。Think It Twice:产品设计、生产环节把控较好（合作方分别是麦锡和英业达），不过相应地，也造成了成本较高的结果。同时，市场方面对密码管理、硬件加密的感知度不强。U蜜选择从游戏玩家和商务人士切入，不过仍需要投入教大的教育成本。What: 一个cosplay图片分享、创作和交友平台 How:通过满足用户晒图片、看图片的需求，聚集喜欢Cosplay的人群。用户可通过添加标签参与线上活动或某个主题，如宅腐、黑执事等。二次元文化浓，图片质量高，coser颜值高。不提供滤镜。Think It Twice:内容丰富，聚集了Cos圈大量优质用户，氛围不错。但用户停留在晒、看，要实现从线上的赞、关注到线下的约摄影、约面基等二次元到三次元的转化，还需另下功夫。What: 二次元贴纸应用。 How:贴纸的用法都差不多，表情、对白、场景，这个二次元中毒很深。应该是贴纸界运营做的最好的，跟热门动漫、影视剧的场景结合的很好，比如猜柯南剧情，我邻居是EXO。Think It Twice:总之是媒体属性、场景性结合很不错的范例，最见不得老老老老发自拍的——很难差异化！查看: 3904|回复: 7
求Light factory 中的LF Stripe插件！！
在线时间 小时
我的AE里没有 急需此插件 谢谢分享！！
在线时间 小时
已经找到！！
在线时间 小时
FTP上就有，坛子里也有的
在线时间 小时
在线时间 小时
原帖由 scofildezz 于
08:19 发表
我的AE里没有 急需此插件 谢谢分享！！
楼主在哪里找到大,我找了很久了/能不能给个地址啊!
在线时间 小时
我是来参观学习滴
在线时间 小时
同求....我也找了很久了
在线时间 小时
求啊！求！求！！！！！！！！！！！！！