多图预警,请耐心等待加载
周四去上海参加了谷歌开发者大会,收获满满。

下面我就当个导游,带大家畅游一番吧。
先来到世博中心,显眼的 Google Logo

入场后先报道,领取胸牌


进入主会场

等待演讲开始

前面是关于Android的演讲就不拍了,和大家一样,我对谷歌在 TensorFlow 和 机器学习方面的最新动态比较感兴趣。



其实这一部分的核心内容在昨天的主旨演讲中Laurence已经简单介绍过,大佬从数据、框架、模型、MLOps 四个方面说明 TensorFlow Project 为开源机器学习构建了全面开源生态,感兴趣可以去大会官网听一下,其实现场的演讲也都有回放了:
现场嘉宾讲的更详细,每一方面都有展开,其实核心就是下面这张图

机器学习的四个支柱:数据、模型框架、部署、监控和维护,这四个支柱 Google 都有开源工具。
数据获取及预处理:TensorFlow 数据集

模型框架:TensorFlow 和 JAX
Deepmind 的一些科研成果,比如alphafold,还有Google research的 imagen、 Parti 都是通过JAX创建的。
JAX 前段时间还有个趣闻,关注我公众号的同学应该知道,有篇文章说“JAX取代TensorFlow”,“谷歌大脑和DeepMind已经普遍放弃TensorFlow,转投 JAX”。(➡️TensorFlow,危!抛弃者正是谷歌自己),很快就有了辟谣(➡️TensorFlow团队:我们没被抛弃),将继续投资TensorFlow和JAX两个ML框架,以推动数百万用户的研究和应用。
演讲嘉宾讲的很透彻,JAX 和 TensorFlow 是定位不同的两个框架,前者专为硬件加速器优化的框架,从而帮助开发者更深入地钻研机器学习的数学运算,后者定位高级框架,帮助不需要深入到数学层面的开发者可以轻松创建自己的模型。
模型部署:TensorFlow.js 、TensorFlow Lite
在云端、网页端、浏览器、移动端和嵌入式平台上运行模型,Google 也有很多成熟的产品,我之前也曾写过一篇文章介绍tfjs(用浏览器玩机器学习,赞!),自认写的清晰明了。

Google Lite 也挺亮眼的,它可以内置到 Google Play 服务中,不需要再在应用中植入 TF Lite ,应用体量可以大幅缩减,也可以使用后台更新功能,用户始终能够使用最新版本,不需要在TF Lite每次更新时再重新。如果用户不使用 Google Play 服务,也可以不使用以上方式,像以前一样自主分发。
监控和维护:TFX 
TFX 不仅可以用于模型部署,它也可为完整 MLOps 部署提供软件框架和工具,并在数据和模型随时间推移不断演变的过程中检测问题。
这四个支柱中 Google 提供的一些列工具集成到一起,统称为Tensor Projects,满足研究人员、开发者、MLOPS 和商务团队的任意机器学习应用需求。

之前没有关注过这一块,设备端(智能手机、物联网设备或浏览器)机器学习其实已经有很多成熟的应用:
设备端机器学习主要包括设备端模型和机器学习流水线,模型是核心,机器学习流水线涵盖从原始输入到输出结果的全流程,两者都非常复杂。


MediaPipe 可以极大简化这个过程,它可以把流水线封装成 MediaPipe Tasks,用 Model Maker 定制模型,通过低代码 API 提供可定制的高性能设备端机器学习解决方案。


使用貌似也挺简单的,和把大象装进冰箱一样,一共分三步:
收集训练数据、使用 Tasks 或 Model Maker 枃建模型、使用 Task library部署模型。

MediaPipe 确实挺有意思的,嘉宾分享了好几个资源,我计划之后深入学习学习
https://mediapipe.dev
https://github.com/google/mediapipe
https://google.github.io/mediapipe/solutions/pose.html
下午场是展示区的技术/产品趣味互动体验,有点困,先喝杯 Google 牌雀巢咖啡提提神

在展区打卡领到许多小礼品:Android 吉祥物、充电线、眼镜、水杯、悠悠球、鼠标垫、冰箱贴、各种贴纸

当然,这些都是身外之物,体验 Google 黑科技才是正事,这部分我会剪个视频在 B 站发布,这里就以图文介绍吧。

挺好玩的,在摄像头前挥舞手臂,就可以化身指挥家,指挥交响乐团。这个 Semi-Conductor 使用了 PoseNet 这个可在浏览器中运行的开源机器学习模型,能够将网络摄像头拍到的身体动作映射到对应的指挥操作。运用其独特的算法,该应用得以有机融合数百个短小的乐器录音片段,让乐团演奏的乐曲能够随着你的指挥而变化。

Tone Transfer 让你可以将日常生活中的各种声音转化为乐器声,比如可以直接对着话筒哼一段旋律,直接在浏览器中录制和上传声音,机器学习模型将它转化成萨克斯风、长笛和其他乐器的声音!



这几个都是前面介绍过的 MediaPipe 实现的,听介绍,代码量极低。
你是否正在研究如何更高效地使用 TensorFlow 开发和训练开源机器学习模型,成为开源机器学习专家? 在这里,根据自身需求,灵活挑选合适的学习资源,开启进阶之旅吧!
最后再放几个资源吧,也是在展区看到的。
为了使开发者更高效地使用 TensorFlow 开发和训练开源机器学习模型,Google 还有很多开源课程。
比如:
Google 携手网易有道在中国大学 MOOC 平台上发布的《 TensorFlow 入门课程 - 部署篇》 专题课程
https://www.icourse163.org/course/youdao-1467217161?from=searchPage&outVendor=zw_mooc_pcssjg_
Google 开发者在线课程,针对希望在部署层面得到进阶提升的开发者。
https://developers.google.cn/learn/pathways?utm_source=social&utm_medium=devkol&utm_campaign=gds22
TensorFlow 开发者认证计划,通过考试的开发者,有机会荣获官方颁发的 TensorFlow 开发者证书和徽章。
https://www.tensorflow.org/certificate?hl=zh-cn
总结一句话就是:不虚此行,下次一定还来。
大家一起 Code For Better,“共码未来” 吧,我要去学 MediaPipe 了。
本文由博客一文多发平台 OpenWrite 发布!
我正在编写一个包含C扩展的gem。通常当我写一个gem时,我会遵循TDD的过程,我会写一个失败的规范,然后处理代码直到它通过,等等......在“ext/mygem/mygem.c”中我的C扩展和在gemspec的“扩展”中配置的有效extconf.rb,如何运行我的规范并仍然加载我的C扩展?当我更改C代码时,我需要采取哪些步骤来重新编译代码?这可能是个愚蠢的问题,但是从我的gem的开发源代码树中输入“bundleinstall”不会构建任何native扩展。当我手动运行rubyext/mygem/extconf.rb时,我确实得到了一个Makefile(在整个项目的根目录中),然后当
我已经在Sinatra上创建了应用程序,它代表了一个简单的API。我想在生产和开发上进行部署。我想在部署时选择,是开发还是生产,一些方法的逻辑应该改变,这取决于部署类型。是否有任何想法,如何完成以及解决此问题的一些示例。例子:我有代码get'/api/test'doreturn"Itisdev"end但是在部署到生产环境之后我想在运行/api/test之后看到ItisPROD如何实现? 最佳答案 根据SinatraDocumentation:EnvironmentscanbesetthroughtheRACK_ENVenvironm
我们的git存储库中目前有一个Gemfile。但是,有一个gem我只在我的环境中本地使用(我的团队不使用它)。为了使用它,我必须将它添加到我们的Gemfile中,但每次我checkout到我们的master/dev主分支时,由于与跟踪的gemfile冲突,我必须删除它。我想要的是类似Gemfile.local的东西,它将继承从Gemfile导入的gems,但也允许在那里导入新的gems以供使用只有我的机器。此文件将在.gitignore中被忽略。这可能吗? 最佳答案 设置BUNDLE_GEMFILE环境变量:BUNDLE_GEMFI
这似乎非常适得其反,因为太多的gem会在window上破裂。我一直在处理很多mysql和ruby-mysqlgem问题(gem本身发生段错误,一个名为UnixSocket的类显然在Windows机器上不能正常工作,等等)。我只是在浪费时间吗?我应该转向不同的脚本语言吗? 最佳答案 我在Windows上使用Ruby的经验很少,但是当我开始使用Ruby时,我是在Windows上,我的总体印象是它不是Windows原生系统。因此,在主要使用Windows多年之后,开始使用Ruby促使我切换回原来的系统Unix,这次是Linux。Rub
我正在玩HTML5视频并且在ERB中有以下片段:mp4视频从在我的开发环境中运行的服务器很好地流式传输到chrome。然而firefox显示带有海报图像的视频播放器,但带有一个大X。问题似乎是mongrel不确定ogv扩展的mime类型,并且只返回text/plain,如curl所示:$curl-Ihttp://0.0.0.0:3000/pr6.ogvHTTP/1.1200OKConnection:closeDate:Mon,19Apr201012:33:50GMTLast-Modified:Sun,18Apr201012:46:07GMTContent-Type:text/plain
无论您是想搭建桌面端、WEB端或者移动端APP应用,HOOPSPlatform组件都可以为您提供弹性的3D集成架构,同时,由工业领域3D技术专家组成的HOOPS技术团队也能为您提供技术支持服务。如果您的客户期望有一种在多个平台(桌面/WEB/APP,而且某些客户端是“瘦”客户端)快速、方便地将数据接入到3D应用系统的解决方案,并且当访问数据时,在各个平台上的性能和用户体验保持一致,HOOPSPlatform将帮助您完成。利用HOOPSPlatform,您可以开发在任何环境下的3D基础应用架构。HOOPSPlatform可以帮您打造3D创新型产品,HOOPSSDK包含的技术有:快速且准确的CAD
在应用开发中,有时候我们需要获取系统的设备信息,用于数据上报和行为分析。那在鸿蒙系统中,我们应该怎么去获取设备的系统信息呢,比如说获取手机的系统版本号、手机的制造商、手机型号等数据。1、获取方式这里分为两种情况,一种是设备信息的获取,一种是系统信息的获取。1.1、获取设备信息获取设备信息,鸿蒙的SDK包为我们提供了DeviceInfo类,通过该类的一些静态方法,可以获取设备信息,DeviceInfo类的包路径为:ohos.system.DeviceInfo.具体的方法如下:ModifierandTypeMethodDescriptionstatic StringgetAbiList()Obt
@作者:SYFStrive @博客首页:HomePage📜:微信小程序📌:个人社区(欢迎大佬们加入)👉:社区链接🔗📌:觉得文章不错可以点点关注👉:专栏连接🔗💃:感谢支持,学累了可以先看小段由小胖给大家带来的街舞👉微信小程序(🔥)目录自定义组件-behaviors 1、什么是behaviors 2、behaviors的工作方式 3、创建behavior 4、导入并使用behavior 5、behavior中所有可用的节点 6、同名字段的覆盖和组合规则总结最后自定义组件-behaviors 1、什么是behaviorsbehaviors是小程序中,用于实现
了解Rails缓存如何工作的人可以真正帮助我。这是嵌套在Rails::Initializer.runblock中的代码:config.after_initializedoSomeClass.const_set'SOME_CONST','SOME_VAL'end现在,如果我运行script/server并发出请求,一切都很好。然而,在我的Rails应用程序的第二个请求中,一切都因单元化常量错误而变得糟糕。在生产模式下,我可以成功发出第二个请求,这意味着常量仍然存在。我已通过将以上内容更改为以下内容来解决问题:config.after_initializedorequire'some_cl
我有一个使用PDFKit呈现网页的pdf版本的Rails应用程序。我使用Thin作为开发服务器。问题是当我处于开发模式时。当我使用“bundleexecrailss”启动我的服务器并尝试呈现任何PDF时,整个过程会陷入僵局,因为当您呈现PDF时,会向服务器请求一些额外的资源,如图像和css,看起来只有一个线程.如何配置Rails开发服务器以运行多个工作线程?非常感谢。 最佳答案 我找到的最简单的解决方案是unicorn.geminstallunicorn创建一个unicorn.conf:worker_processes3然后使用它: