Elasticsearch权威指南-处理冲突.pdf

5星(超过95%的资源)
所需积分/C币:35 2016-01-11 10:48:58 1.44MB PDF
161
收藏 收藏
举报

Elasticsearch权威指南-处理冲突
了 stock count。可惜在web1更新 stock count前它就拿到了数据,这个数据已经是过期的了,当veb2再回来更 新 stock count时这个数宁就是错的。这样就会造成看似卖了一件东西,其实是卖了两件,这个应该属于幻读。)。结果是 我们认为自己确实还有更多的商品,最终顾客会因为销售给他们没有的东西而失望。 变化越是频繁,或读取和更新间的时间越长,越容易丢失我们的更改。 在数据库中,有西种通用的方法确保在并发更新时修改不丢失: 悲观并发控制( Pessimistic concurrency contro 这在关系型数据库中被广泛的使用,假设冲突的更改经常发生,为了解决冲奖我们把访问区块化。典型的例子是在读一行数 据前锁定这行,然后确保只有加的那个线程可以修改这行数据。 乐观并发控制( Optimistic concurrency contro): 被 lasticsearch使用;假设冲突不经常发生,也不区块化访问,然而,如果在读写过程中数据发生了变仁,更新操作捋失 敗。这吋候由程序决定冇失败后如佃解决冲突。实际情况中,可以重新尝试更新,刷新数据(重新读取)或者商接反馈给用 户 乐观并发控制 lasticsearch是分布式的。当文档被创建、更新或删除,文档的新版本会被复制到集群的其它节点。 Elasticsearch即是同步 的又是异步的,意思是这些复制请求都是平行发送的,并无序( out of sequence的到达目的地。这就需要一种方法确保老版 本的文档水远不会覆盖新的版本。 上文我们提到 index、get、 delete请求时,我们指岀每个文档都有一个 version号码,这个号码在文档被改变时加一。 Elasticsearch使用这个 version保诬所有修改都被正确排序。当一个旧版本出现在新版本之后,它会被简单的忽路。 我们利用 version的这一优点确保数据不会因为修改冲突而丢失。我们可以指定文档的 version来做想要的更改。如果那个 版本号不是现在的,我们的请求就失败了。 Let's create a new blog post:让我们创建一个新的博文 PUT /website/blog/1/creat title":"My first blog entry text Just crying this out 响应体告诉我们这是一个新建的文档,它的` vers]on是1。现在假没我们要编辑这个文档:把数据加载到Meb表单中,修 改,然后保存成新版本。 首先我们检索文档 GET /website/blog/1 响应体包含相同的 version是1 website", verson title":"My first blog entry", Just trying this out 现在,当我们通过重新索引文档保存修改时,我们这样指定了 version参数 PUt /website/blo title":"My first blog entry text":starting to get the hang of this ●<1>我们只希望文栏的vers1o是1时更新扌生效 This request succeeds, and the response body tells us that the _version has been incremented to 2: 请求成功,响应体告诉我们 verslon已经增加到2: n index: website type blog' icreated false 然而,如果我们重新达行相同的索引清求,依旧指定vers]on=1,Elasticsearch捋返回499Conflict状态的HTTP响应。响应 体类似这样: error:VersionConflictEngineException [[website][2] [blog][1] version conflicT, current [2], provided [1]]" stat 4a9 这告诉我们当前 version是2,但是我们指定想要更新的版本是1 我们需要做什么取决于程序的需求。我们可以告知用户其他人修改了文档,你应该在保存前再看一下。而对于上文提到的商 品 stock count,我们需要重新检最新文档然后申请新的更改操作。 所有更新和刪除文档的请求都接受 ver slon参数,它可以允许在你的代码中增加乐观锁控制。 使用外部版本控制系统 种常见的结构是使用一些其他的数据库做为主数据库,然后使用 Elasticsearch搜索数据,这意味着所有主数据库发生变 化,就要将其拷贝到 lasticsearch中。如果有多个进程负责这些数据的同步,就会遇到上面提到的并发问题 如果主数据庄有版本宇段——或一些类似于 timest amp等可以用于版本控制的宇段——是你就可以在 Elasticsearch的查询宇 符串后面添加 version_type= external来使用这些版本号。版本号必须是整数,大于霁小于9.2e18—Java中的正 的1 外部版本号与之前说的内部版木号在处理的时候有些不同。它不再检查vers1on是否与请求中指定的一致,而是检查是否小 于指定的版本。如果请求成功,外部版本号就会被存储到 version中。 外部版本号不仅在案引和删除请求中指定,也可以在创建( create)新文档中指定。 例如,创建一个包含外部版本号5的新博客,我们可以这样做 PUT /website/blog/2?version=5&version_type=external tit⊥e":" My first externa⊥ blog entry" text":Starting to get the hang of this 在响应中,我们能看到当前的 version号码是5 { nb Icreated true 现在我们更新这个文档,指定一个新 version号码为10: PUT /website/blog/2?version=10&version type=external s title":Ny first external blog entry text": This is a piece of cake 请求成功的设置了当前 version为19 index "b10g i version: 10 created":fa⊥se 如果你重新运行这个请求,就会返回一个像之前一祥的冲哭错误,因为指定的外部版本号不大于当前在 Elasticsearch中的版 本 文档局部更新 在《更新文档》一章,我们说了一种通过检索;修改,然后重建整文档的索引方法来更新文档。这是对的。然而,使 用 update AP,我们可以使用一个请求来实现局部更新,例如增加数量的操作。 我们也说过文档是不可变的——它们不能被更改,只能被替换。υ pdate APl必须遵循相同的规则。表面看来,我们似乎是局 部更新了文档的位,内部却是像我们之前说的一祥简单的使用 update Al处理相同的检索-修改-重建索引流程,我们也减 少了其他进程可能导致冲突的修改。 最简单的 update请求表单接受一个局邰文档参数doc,它会合并到现有文档中——对象合并在一起,存在的标量字段被覆 盖,新字段被添加。个例子,我们可以使用以下请求为博客添加一个tags字段和一个 Vlews字段 POST /website/blog/1/_update tags testing 如果请求成功,我们将看到类似idex请求的响应结果 检索文档文档显示被更新的_ sour ce字段 index: bsite n id n version :3 n found true, source"; title :"My first blog entry text Starting to get the hang of this,," tags":["testing"], ≤1> <1>我们新添加的字段已经被添加到 sourcc字段中 使用脚本局部更新 使用 Groovy脚本 这时候当A不能满足要求时, Elasticsearch允许你使用脚本实现自己的逻辑。脚本支持井常多的APl,例如搜索、排 序、聚合和文档史新。脚本可以通过请求的一部分、检索特殊的, scripts索引或者从磁盘加栽方式执行。 默认的脚本语言是 Groovy,一个快速且功能丰富的脚本语言,语法粪似于 Javascript它在一个沙盒( sand box)中运 行,以防止恶意用户毁坏 Elasticscarch或攻击服务器。 你可以在《脚本参考文档》中获得更多信息。 脚本能够使用 update AP改变 source字段的内容,它在脚本内部以c. source表小。例如,我们可以使用脚本増加博客 的 views数量 POST /website/blog/1/_update script:ctx. source views+=1 我们还可以使用脚本增加一个新标签到tas数组中。在这个例子中,我们定义了一个新标签做为参数而不是硬编码在脚本 里。这允许 Elasticsearch未来可以重复利用脚本,而不是在想要增加新标签时必须每次编详新脚本 POST /website/blog/1/ update script ctx. source, tags+=new tag", 获取最后两个有效请求的文档 d version source":I title:My first blog entry text": Starting to get the hang of this,,, views: 1 <2> 1> search标签已经被添加到tags数组 字段已经被增加 通过设置ctx.op为 delete我们可以根据内容删除文档 POST /website/blog/1/_update scr IpI 'ctx0p= ctx._source. views = count ? 'delete' 更新可能不存在的文档 想象我们要在 Elasticsearch中存储浏览量计数器。每当有用户访问页面,我们增加这个页面的浏览量。但如果这是个新页 面,我们并不确定这个计数器存在与否。当我们试图更新一个不存在的文档,更新捋失败。 在这种情况下,我们可以使用 user t参数定义文档来使其不存在吋被创建。 POST /website/pageviews/1/_update 第一次执行这个请求, upsert值被索引为一个新文档,初始化 views宇段为1.接下来文栏已经存在,所以 script被更新代 替,增加 VICWS数量。 更新和冲突 这这一节的介绍中,我们介绍了如何在检( retrieve)和重建索引( ( reindex)中保持更小的竇口,如何减少冲突性变更发生的概 率,不过这些无法被完全避免,像一个其他进程在 update进行重建索引时修改了文档这种情况旧可能发生。 为了避免丢失数据, update APl在检索( retrieve)阶段柃索文档的当前_ version,然后在重建柬引( reindex)阶段通 过 index请求提交。如果其他进程在检( retrieve)和重加森引(reindex)阶段修改了文档, version将不能被匹配,然后更 新失败。 对于多用户的局部吏新,文档被修改了并不豐紧。例如,两个进程都要增加歹面浏览量,增加的顺序我们并不关心——如果 冲奕发生,我们唯一要做的仅仅是重新尝试更新既可。 这些可以通过 retry on_ conflict参数设置重试次数来自动完成,这样 update操作捋会在发生错误前重试这个值默认为 POST /wEbsite/pageviews/1/update?retry_on_conflict=5 <1> script:ctx. source. viewS+=1 upsert :I ●<1>在错误发生前重试更新5次 这适用于像增加计数这种顺序尢关的操作,但是还有一种顺序非常重要的情况。例如 index apl,使用“保留最后更新{ast write-wIns)"的 update AP,但它依旧接受一个 versor参数以允许你使用乐观并发控制( optimistic concurrency control 來指定你要更细文档的版本。

...展开详情
试读 8P Elasticsearch权威指南-处理冲突.pdf
立即下载
限时抽奖 低至0.43元/次
身份认证后 购VIP低至7折
一个资源只可评论一次,评论内容不能少于5个字
city20200106 可以的,参考了
2016-12-23
回复
您会向同学/朋友/同事推荐我们的CSDN下载吗?
谢谢参与!您的真实评价是我们改进的动力~
上传资源赚钱or赚积分
最新推荐
Elasticsearch权威指南-处理冲突.pdf 35积分/C币 立即下载
1/8
Elasticsearch权威指南-处理冲突.pdf第1页
Elasticsearch权威指南-处理冲突.pdf第2页

试读结束, 可继续读1页

35积分/C币 立即下载