【藏经阁一起读（44）】读《2022技术人的百宝黑皮书）》，你有哪些心得？

2022年，淘宝工程师在完成工作任务的情况下，将各种技术，思想和研究进行了总结，并将其免费分享出来，于是我们有幸拜读到这份《2022技术人的百宝黑皮书》。纵览黑皮书内容，内容丰富全面，涵盖了终端技术、服务端架构、音视频与图像技术、3DXR技术、技术质量、数据算法等多个技术领域，我们选3DXR中的虚拟数字人这个当前最火热的方向来谈一谈阅读后的收获。
元宇宙在资本市场大火之后，大家一直在探寻元宇宙是什么，普通人目前能看到的元宇宙产品是什么？虚拟数字人被认为是最先为大家所知的元宇宙形象，记得2021年抖音虚拟人柳夜熙一夜爆火，一天涨粉百万，体现了大家对虚拟数字人的喜爱。黑皮书定义数字人的三个核心要素——形，动，神，从外观、行为到思想均无限趋近于真人特征，拟人态越高，数字人越逼真，越具备实用性和商用性。
形，通过模型设计、捏脸、骨骼蒙皮、混合变形、换装和美颜、渲染和真实感绘制这一系列步骤，实现成虚拟数字人的形 - “具备人或拟人的外观，具有特定的相貌等人物特征”。
动，通过真实且细腻的表情和动作、手K动画、动作捕捉、动作编排等方法完成虚拟数字人的动 - “拥有和人相似的行为，具有用语言、表情和肢体等表达的能力”。
神，当然虚拟数字人的产品和研究，在神上面是最难的，也是未来的核心研究方向，“拥有比拟人的思想，具有识别外界环境、并能与人交流互动的能力”，有一个词形容的比较好——传神，我们希望看到一个真正活过来，能够进行思考的数字人，到那时机器人大时代将真正到来。
未来，超写实渲染、微表情、肌肉模拟、物理材质、光线追踪、XR/6G、脑机接口等技术的发展将让虚拟数字人越来越成熟，能说会道，能写能画，游戏，直播，客服，旅游，销售，演唱会，视频创作，机器人等行业都会迎来大变革，有效解决劳动力不足和人力成本高企的问题，提高社会生产力，推动经济发展。

基于淘宝的真实应用场景下的一些技术还是很有启发性的，比如纹理压缩技术就是为了缓解内存瓶颈而产生的，gpu对于图像处理并行运算能力很强，减少等待时间对于提升用户浏览体验还是很有效的. 然后是Falco可观测模型，这个应该是面对移动端优化同时做到持续观测，能够快速定位问题.以及对于数据进行精简等操作，降低网络延迟等核心都是为了提升用户体验. 在服务器后端的应用上就是一些技术比如线程.线程池的优化应用，就在一点点优化中提升整体的性能. MNN深度学习技术在移动设备的应用前景还是很广泛的，目前移动设备占有量很大，如果能充分利用移动设备的算力，可以实现更多的场景. 总体来说，本书对于技术和某些发展前景还是做了细致的描述，对于业务包括发展方向还是有启发的.

服务器端技术部分的合理利用线程池和线程变量部分印象深刻，虽然现在这些底层技术已经被各个库和框架做了封装，我们不需要了解细节就可以很好的使用这部分技术，但是知道其实现原理，见微知著，可以帮助我们更好的提升技术水平，写出更加强壮的代码。基础的经典的才能够创造出永恒的价值。

　　我最感兴趣的就是机器学习算法在淘宝这个级别的平台上的应用，而的确黑皮书里面有一些非常深入的解读，不是那种春秋笔法一笔带过，相信会对很多从业者有很大的启发。当然这本书本身内容其实挺庞杂的，建议大家通过关键词和目录搜索自己感兴趣的内容。

　　在黑皮书中，淘宝团队就对他们的这篇基于淘宝真实场景的文章进行了深入解读。简单来说，在现在的大数据场景下，我们每个人的每个搜索其实都被描述为一个“向量”，而我们希望学到的这个向量同时反应了我的“需求”和我的“个性”。淘宝基于多年的经验，发现了「向量召回模型相关性提升的主要收益来源于样本的改进」，并因此基于实战经验总结了不同样本的优势。并根据观察，在这个工作里对「难负样本」进行了特别处理，比如通过数据增强的方法生成难负样本等。

　　同时搭配在多个环节上的优化提升，比如训练样本、损失函数上、噪音处理上等，这篇论文提出的方法比基准方法有了较大的提高。和论文的纯英文不同，黑皮书专门总结了中文表格解释为什么淘宝的向量化召回会有更好的效果，比直接啃原文要来的快捷，比较适合我这种想要大致了解思路的读者。

活动活动，我要积分

超级超级参加

设计实践中，要基于需求、业务驱动架构，无论选用 RDB/NoSQL, 一定是以需求为导向，最终数据存储方案必然是各种权衡的综合性设计。 综上所述，开发规约的目标： 码出高效：标准统一，提升沟通效率和研发效能。 码出质量：防患未然，提升质量意识和系统可维护性，降低故障率。 码出情怀：工匠精神，追求极致的卓越精神，打磨精品代码。 开发规约从无到有，只是短期的目标；使大家遵守开发规约的成本极大降低，发布上线的应用符合开发规约是中期 目标；而远期目标是从有到无，因为人人自觉遵守，规约和谐地融入代码的字里行间，规约似乎消失了，但又无处 不在。

怎么弄

2022技术人的百宝黑皮书确实是技术人的百宝箱。原来它里面不仅仅只有技术，还包含了对职场、行业的一些分享和思考。认真研读之后，发现它不仅对急需成长的新人有帮助，而且对希望能转行、精进、创业的技术人也有很高的指导作用。如今的年代对于幕后的技术人而言，越来越能感受到了技术加速发展带来的改变。而且随着智能化、云原生等趋势不断加剧，那么整个持续的技术革新和技术融合不断突破自身边界，从而失去了重新定义技术产品和架构。因此这个技术更迭是最期待也最头疼的事情，这些人往往先等待大厂在技术最前沿的尝新和探索，以便快速调整自己的技术方向。此时这本2022技术人的百宝黑皮书的出现，无疑是一个很大的推动力。其中在技术栈方面，这个黑皮书涵盖多个技术领域。能够为技术人员打开新思路，非常值得去阅读，让你轻松获取技术知识。

2022年，大淘宝技术公众号一共发布了 248 篇内容，在知乎上做了 80 个精彩回答，在头条、百家、掘金、思否、开源中国等内容阵地都有我们努力布道的身影，也收获了来自社区的各项影响力评选肯定，更开心的是，收到了开发者们的点赞与认同。 过去一年，他们尝试在分享的过程中，对自己做过的工作进行系统性的总结和提炼，升华自己对技术深度的理解；更希望能够与同行交流互动，共同关注业务的差异性、技术思考的不同路径、技术的困难挑战以及对未来的思考，彼此成就，共同成长。 基于此，他们将一整年的精华内容梳理合并，重磅推出大淘宝技术年货《2022技术人的百宝黑皮书》。 在2022年的技术年货中，你将看到以下内容—— 1、大淘宝各技术栈工程师重新定义和解决问题，分享消费点滴改变背后的技术深意。 他们将业界关注&大淘宝主攻的技术栈做了梳理更新，分为终端技术、服务端技术、3DXR技术、数据算法、音视频与图像技术以及技术质量6个重点篇章。 2、大淘宝技术工程师们的成长经验沉淀，从幼稚到成熟，就是从不负责任到承担责任的过程。 技术人做事情，判断力和分寸感很重要，于是他们梳理了来自大淘宝技术工程师们的一些经验和思考，例如程序员的职业规划路径和职业操守，系统思考业务问题的方法论等，还有他们在多年职场经验中淬炼出的“金玉良言”，给同路人一些参考价值和方向。 3、50 余位工程师推荐学习的GitHub项目，入门级经典库or框架，勤学勤练共同成长。 学习是一个不断精进的过程，来自大淘宝技术的 50 余位工程师，通过他们自身学习成长和技术精进的经历，给大家推荐了一些GitHub上各领域经典的学习练手项目，覆盖常见常用的库、方案、框架、环境等，作为参考，一起成长。 4、2022大淘宝技术顶会 paper 全文，窥见相关领域下一步最新方向。 按照计算机协会定义的CCF-A类会议和期刊，他们精选出在数据挖掘与机器学习领域、计算机视觉及多媒体等领域里的11篇顶会paper，涵盖了OSDI 2022 、SIGIR 2022 、ICIS 2022等多个国际会议。对相关领域感兴趣的技术从业者或许能窥见到自己这个领域下一步的热门方向。 好的技术氛围就是——分享与交流不止于内部团队，不止于业务形态相似，他们期望通过阅读《2022技术人的百宝黑皮书》能在不同业态、不同背景的碰撞和交流中，给彼此带来更深的技术理解。

参加参加