授权协议: MIT
开发语言: C#
操作系统: 跨平台
开发厂商: 微软
收录时间: 2018-09-09
提 交 者: 红薯

Sketch2Code 是一个基于 Web 的解决方案,使用 AI 将手绘的用户界面草图转换为可用的 HTML 代码。Sketch2Code 由微软和 Kabel、Spike Techniques 合作开发。读者可以在 GitHub 上找到与 Sketch2Code 相关的代码、解决方案开发过程和其他详细信息。

下图演示了利用 Sketch2Code 将手绘草图转换成代码的操作过程。在微软官方网站上可以做更多尝试:https://sketch2code.azurewebsites.net/

让我们来看看使用 Sketch2Code 将手绘草图转换成 HTML 代码的过程:  

  • 用户将图片上传到网站上。

  • 自定义视觉模型预测在图像中出现的 HTML 元素,并将它们的位置标出来。

  • 手写文本识别服务读取预测元素中的文本。

  • 布局算法根据预测元素的边框空间信息生成网格结构。

  • HTML 生成引擎使用上述信息来生成 HTML 代码。

工作流程如下所示:

Sketch2Code 使用了以下组件:  

  • 微软自定义视觉模型(Custom Vision):这个模型是基于不同的手绘稿的图象训练得出的,并标记了与常见 HTML 元素(如文本框、按钮、图像等)相关的信息。

  • 微软计算机视觉服务:用于识别设计元素中的文本。

  • Azure Blob Storage:保存与 HTML 生成过程的每个步骤相关的信息,包括原始图像、预测结果、布局和分组信息等。

  • Azure Function:它作为后端入口点,通过与其他服务发生交互来协调生成过程。

  • Azure Website:用户界面前端,用户可以在这里上载设计图,并查看生成的 HTML。

以上组件通过如下架构组合在一起:

介绍来源:AI前线

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

Sketch2Code 的相关资讯

还没有任何资讯

Sketch2Code 的相关博客

运用AI完成网站设计 加速网页生成速度

设计师要把网页设计手稿转成HTML程序代码费时费力,微软让人工智能来帮忙,自动辨识手绘元素与文字生成HTML页面。微软在其AI....

上周热点回顾(9.3-9.9)

热点随笔: · 从技术转管理,我做了什么来拯救自己?(zer0black) · Dockerfile 中的 COPY 与 ADD 命令(sparkdev) · 在...

深度学习能用于界面设计吗?

最近看到在“Baidu Create 2019”的百度AI交互设计论坛上,设计师分享了他们的最新成果:百度人工智能交互设计院与百度研究院...

开源中国 2018 新增开源软件最受欢迎 TOP 50

来源:开源中国 本周开源中国陆续公布了两个年度榜单,分别是国产新秀榜 TOP 30 和国产新增榜 TOP 50。由于两个榜单的数据来源...

开源中国 2018 新增开源软件最受欢迎 TOP 50

本周开源中国陆续公布了两个年度榜单,分别是国产新秀榜 TOP 30 和国产新增榜 TOP 50。由于两个榜单的数据来源都是国内开源项...

UI自动化技术在高德的实践

一、背景 汽车导航作为ToB业务,需要满足不同汽车厂商在功能和风格上体现各自特色的需求。针对这种情况,传统的UI开发方式,基...

UI自动化技术在高德的实践

一、背景 汽车导航作为ToB业务,需要满足不同汽车厂商在功能和风格上体现各自特色的需求。针对这种情况,传统的UI开发方式,基...

前端慌不慌?用深度学习自动生成HTML代码

选自Floydhub 作者:Emil Wallner 机器之心编译 如何用前端页面原型生成对应的代码一直是我们关注的问题,本文作者根据 pix2...

Sketch2Code 的相关问答

还没有任何问答,马上提问

评论 (22)

加载中
刚友好测试了一下,不得不说。。。路漫漫其修远兮
2019/08/23 16:29
回复
举报
这只是简单的交互吧?
2018/09/19 14:01
回复
举报
又想让我训练AI……
2018/09/17 10:36
回复
举报
打分: 很差
噱头
2018/09/17 10:18
回复
举报
打分: 很差
效果很差
2018/09/17 10:11
回复
举报
用Axure RP画出来的表单图片都不行
2018/09/13 13:56
回复
举报
打分: 力荐
Sketch2Code 既然能够有这样的设想,那说明离实现不远了,只会画页面和做简单交互的前端们有点危机意识吧!
2018/09/11 10:47
回复
举报
昨天上午试了试,画了一个登陆界面,生成的乱七八糟的
2018/09/11 08:23
回复
举报
抢饭碗的来了
2018/09/10 22:16
回复
举报
微软的演示地址报:Server Error in '/' Application.
2018/09/10 18:02
回复
举报
更多评论
22 评论
85 收藏
分享
在线直播报名
返回顶部
顶部