人工智能和大数据

2018-04-06andy阅读(7014)评论(0)

Faiss提高搜索查询速度 将数据集分成Voronoi cells， 每一个向量都落在其中一个cell中， 搜索时，只需要查询搜索向量所在的cell及附近一些相邻的cell即可 这就是IndexIVFFLat 索引的原理 这种索引需要一个t...

2018-02-23andy阅读(7910)评论(0)

Faiss Faiss是一个高效的相似度搜索和密集向量聚类的工具。它包含了可以在任意大小 甚至超过可用RAM大小的向量集上进行搜索的算法。它自身也带了一些支持性的代码用于评测和调参。Faiss是C++写的，它支持完整的python包装（包括...

2018-02-07andy阅读(13710)评论(6)

java通过gRPC整合tensorflow serving(之三)——使用java调用tfserving的模型 SORRY 本来打算上周末发的，一直有事拖延了一下。 本篇是本系列的第三篇，承接前两篇 【java通过gRPC整合tensor...

2018-01-26andy阅读(7858)评论(0)

【Faiss系列之一】在Mac系统编译安装Faiss Faiss是Facebook开源的一个相似性搜索库，正如它的名字Faiss就是Fair AI Similarity Search。 最近由于工作原因，需要探索一下此库的使用方法和性能，故...

2018-01-24andy阅读(6015)评论(0)

关于SBT你需要知道的那些事 之前在做一个有关spark的项目的时候，需要使用sbt构建scala代码，以前主要用maven，gradle也用一点，但是sbt实在陌生，摸索了一阵，把自己在使用sbt中最需要了解的东西记下来，以备同样不熟悉的...

2018-01-22andy阅读(9239)评论(2)

java通过gRPC整合tensorflow serving(之二)——安装tfserving并部署示例模型 承接上一篇【java通过gRPC整合tensorflow serving——gRPC java入门例子】 这是本系列的第二篇，上一...

2018-01-19andy阅读(5338)评论(0)

TensorFlow中的decode_jpeg与opencv的imread结果不一致 关于这个问题，我觉得有必要记录一下，开发中可能就是一个小坑。 我遇到的问题是我导出模型部署到了tensorflow serving，然后python编写客...

2018-01-10andy阅读(5850)评论(0)

spark中如何禁用和开启snappy压缩 spark的作用中如果需要从hdfs中读写较大的结果，最好开启snappy压缩，已取得较好的性能。 开启或者禁用snappy压缩的方法 初始化sparkConf配置 var conf = new ...

2018-01-08andy阅读(2621)评论(0)

CentOS解决Docker Networking Disabled: WARNING: IPv4 forwarding is disabled. Networking will not work 由于我的tensorflow servin...

2017-12-09andy阅读(8173)评论(4)

java通过gRPC整合tensorflow serving——gRPC java入门例子 项目中以前需要把算法同事们train好的tensorflow model包装成服务提供给其他部门应用，一开始我们使用python直接调用tensor...