即刻App年轻人的同好社区
下载
关于语雀 23 日故障的公告
各位语雀的用户：
10 月 23 日语雀出现重大服务故障，且持续 7 个多小时才完全恢复，给用户使用造成极大不便，对此我们深感抱歉。经过复盘，我们在这里向大家进一步说明故障原因、修复过程和改进措施。
故障原因及处理过程：
10 月 23 日下午，服务语雀的数据存储运维团队在进行升级操作时，由于新的运维升级工具 bug，导致华东地区生产环境存储服务器被误下线。受其影响，语雀数据服务发生严重故障，造成大面积的服务中断。为了尽快恢复服务，我们和数据存储运维团队全力进行数据恢复工作，但受限于恢复方案、数据量级等因素，整体用时较长。具体过程如下：
14:07 数据存储运维团队收到监控系统报警，定位到原因是存储在升级中因新的运维工具 bug 导致节点机器下线；14:15 联系硬件团队尝试将下线机器重新上线；15:00 确认因存储系统使用的机器类别较老，无法直接操作上线，立即调整恢复方案为从备份系统中恢复存储数据。15:10 开始新建存储系统，从备份中开始恢复数据，由于语雀数据量庞大，此过程历时较长，19 点完成数据恢复；同时为保障数据完整性，在完成恢复后，用时 2 个小时进行数据校验；21 点存储系统通过完整性校验，开始和语雀团队联调，最终在 22 点恢复语雀全部服务。用户所有数据均未丢失。
改进措施：
通过这次故障我们深刻认识到，语雀作为一款服务千万级客户的文档产品，应该做到更完善的技术风险保障和高可用架构设计，尤其是面向技术变更操作的“可监控，可灰度，可回滚”的系统化建设和流程审计，从同 Region 多副本容灾升级为两地三中心的高可用能力，设计足够的数据和系统冗余实现快速恢复，并进行定期的容灾应急演练。只有这样，才能提升严重基础设施故障时的恢复速度，并从根本上避免这类故障再次出现。为此我们制定了如下改进措施：
1、升级硬件版本和机型，实现离线后的快速上线。该措施在本次故障修复中已完成；
2、运维团队加强运维工具的质量保障与测试，杜绝此类运维 bug 再次发生；
3、缩小运维动作灰度范围，增加灰度时间，提前发现 bug；
4、从架构和高可用层面改进服务，为语雀增加存储系统的异地灾备。
赔偿方案：
为了表达我们的歉意，我们将向所有受到故障影响的用户提供如下赔偿方案：
针对语雀个人用户，我们赠送 6 个月的会员服务。操作流程：进入工作台「账户设置」，点击左侧「会员信息」，在会员信息页面点击「立即领取」，即可获得赠送服务。
针对语雀空间用户，由于情况比较复杂，我们会单独制定赔偿方案。请空间管理员留意语雀站内信。
这次的故障让我们深切地感受到了用户对语雀的依赖以及语雀肩上的重大责任。再次向所有语雀用户表达我们诚挚的歉意。我们将持续提升语雀的服务质量和服务稳定性，不辜负每一位用户的信任！
语雀团队
2023 年 10 月 24 日
各位语雀的用户：
10 月 23 日语雀出现重大服务故障，且持续 7 个多小时才完全恢复，给用户使用造成极大不便，对此我们深感抱歉。经过复盘，我们在这里向大家进一步说明故障原因、修复过程和改进措施。
故障原因及处理过程：
10 月 23 日下午，服务语雀的数据存储运维团队在进行升级操作时，由于新的运维升级工具 bug，导致华东地区生产环境存储服务器被误下线。受其影响，语雀数据服务发生严重故障，造成大面积的服务中断。为了尽快恢复服务，我们和数据存储运维团队全力进行数据恢复工作，但受限于恢复方案、数据量级等因素，整体用时较长。具体过程如下：
14:07 数据存储运维团队收到监控系统报警，定位到原因是存储在升级中因新的运维工具 bug 导致节点机器下线；14:15 联系硬件团队尝试将下线机器重新上线；15:00 确认因存储系统使用的机器类别较老，无法直接操作上线，立即调整恢复方案为从备份系统中恢复存储数据。15:10 开始新建存储系统，从备份中开始恢复数据，由于语雀数据量庞大，此过程历时较长，19 点完成数据恢复；同时为保障数据完整性，在完成恢复后，用时 2 个小时进行数据校验；21 点存储系统通过完整性校验，开始和语雀团队联调，最终在 22 点恢复语雀全部服务。用户所有数据均未丢失。
改进措施：
通过这次故障我们深刻认识到，语雀作为一款服务千万级客户的文档产品，应该做到更完善的技术风险保障和高可用架构设计，尤其是面向技术变更操作的“可监控，可灰度，可回滚”的系统化建设和流程审计，从同 Region 多副本容灾升级为两地三中心的高可用能力，设计足够的数据和系统冗余实现快速恢复，并进行定期的容灾应急演练。只有这样，才能提升严重基础设施故障时的恢复速度，并从根本上避免这类故障再次出现。为此我们制定了如下改进措施：
1、升级硬件版本和机型，实现离线后的快速上线。该措施在本次故障修复中已完成；
2、运维团队加强运维工具的质量保障与测试，杜绝此类运维 bug 再次发生；
3、缩小运维动作灰度范围，增加灰度时间，提前发现 bug；
4、从架构和高可用层面改进服务，为语雀增加存储系统的异地灾备。
赔偿方案：
为了表达我们的歉意，我们将向所有受到故障影响的用户提供如下赔偿方案：
针对语雀个人用户，我们赠送 6 个月的会员服务。操作流程：进入工作台「账户设置」，点击左侧「会员信息」，在会员信息页面点击「立即领取」，即可获得赠送服务。
针对语雀空间用户，由于情况比较复杂，我们会单独制定赔偿方案。请空间管理员留意语雀站内信。
这次的故障让我们深切地感受到了用户对语雀的依赖以及语雀肩上的重大责任。再次向所有语雀用户表达我们诚挚的歉意。我们将持续提升语雀的服务质量和服务稳定性，不辜负每一位用户的信任！
语雀团队
2023 年 10 月 24 日
19 33
🎁 【语雀大学生公益计划】发布啦~
语雀是大学生朋友们超爱用的文档和知识管理工具（应该是吧！）。知识管理中的记录、整理、分享，个人笔记或小组协作，都可以用语雀来完成。
语雀希望为支持大学生的学习与成长尽一份力。
💡划重点「大学生、教师只需认证 edu.cn 结尾的教育邮箱，即免费可获得价值 99 元/年的专业会员权益，在校期间可每年续期」
详细了解语雀和公益计划，请见👉🏻mp.weixin.qq.com
🙏🏻 拜托大家帮忙转发到校友和朋友们都能看见的地方（校内论坛、朋友圈以及各种社交平台等），让它惠及更多人🌱
❤️ 语雀会一直坚定地陪伴你们的成长和创作~
语雀是大学生朋友们超爱用的文档和知识管理工具（应该是吧！）。知识管理中的记录、整理、分享，个人笔记或小组协作，都可以用语雀来完成。
语雀希望为支持大学生的学习与成长尽一份力。
💡划重点「大学生、教师只需认证 edu.cn 结尾的教育邮箱，即免费可获得价值 99 元/年的专业会员权益，在校期间可每年续期」
详细了解语雀和公益计划，请见👉🏻mp.weixin.qq.com
🙏🏻 拜托大家帮忙转发到校友和朋友们都能看见的地方（校内论坛、朋友圈以及各种社交平台等），让它惠及更多人🌱
❤️ 语雀会一直坚定地陪伴你们的成长和创作~
18 76
【语雀x 阿里云 开发者社区评测局】还有朋友没上车吗🤓：developer.aliyun.com
聊聊你的语雀使用体验、产品测评、最佳实践……优质测评可获得活动礼品哦~
2月28日结束，周末肝一肝，也许礼品就到手了！
聊聊你的语雀使用体验、产品测评、最佳实践……优质测评可获得活动礼品哦~
2月28日结束，周末肝一肝，也许礼品就到手了！
6 41
第四期《来帮语雀做产品》直播将在 3月1日（下周三）晚 8 点开始。
后续每周三 8 点定期直播，关注【语雀】视频号即可预约。
本期会围绕语雀的【数字花园&逛逛】展开讨论，有任何建议都可以在文档下方留言：www.yuque.com
除了聊聊大家的反馈，本期还会抽取 5 位热心用户，送出我们全新升级的“数字花园”实体礼盒。
期待大家踊跃留言🔥🔥🔥
后续每周三 8 点定期直播，关注【语雀】视频号即可预约。
本期会围绕语雀的【数字花园&逛逛】展开讨论，有任何建议都可以在文档下方留言：www.yuque.com
除了聊聊大家的反馈，本期还会抽取 5 位热心用户，送出我们全新升级的“数字花园”实体礼盒。
期待大家踊跃留言🔥🔥🔥
7 40
敲重点：学生老师免费领6个月语雀会员。领取方式见：mp.weixin.qq.com
12 01
家人们，阿里云开发者社区开了一个语雀测评局🌚：developer.aliyun.com。大家有空的话来帮帮忙，撑撑场面，在评测局里聊聊你的语雀使用体验、产品测评，参与活动有机会或得语雀最新周边套装哦。
7 41
可能是最“离谱”的语雀年度报告（活动入口：www.yuque.com）😂。这字数我数了半天：个 十 百 千 万 十万 百万 千万 亿……
12 20
🚀语雀年度报告终于上线！
■ 过去一年，你在语雀创建了多少篇文档？写下了多少字？
■ 如果用 AI 绘制你的数字花园，它会呈现怎样的风貌？
……
点击下方链接，查收你的专属报告👇
www.yuque.com
🎁 福利时刻
晒年度报告截图，有机会领语雀会员和全新周边！活动详情请点击：mp.weixin.qq.com
■ 过去一年，你在语雀创建了多少篇文档？写下了多少字？
■ 如果用 AI 绘制你的数字花园，它会呈现怎样的风貌？
……
点击下方链接，查收你的专属报告👇
www.yuque.com
🎁 福利时刻
晒年度报告截图，有机会领语雀会员和全新周边！活动详情请点击：mp.weixin.qq.com
17 32