自己动手搭建大数据查询平台的入门级做法

文章预览

知识 案例 随笔 声音 其他 编者按 做数据分析这些年，有一条颠簸不破的规律，即所谓智能算法不过是过眼云烟，最根本的还是数据查询检索……。作者利用课余时间，自己动手搭建大数据查询平台，总结了一套入门级的做法，大家都可以试一试。 一、技术路线 1、D ocker —— 为什么要用Docker实现？ 最根本的原因， 紧急时能够快速解构，消除一切证据，毕竟做数据工作，风险还是很大。 2、Solr ——为什么要用Solr，原因就不必细说了，跟数据量和查询效率有直接关系。 3、DataleakMonitor ——这是小编自己编写的代理程序，主要功能是：从公网接受数据检索需求并发送到局域网内，在局域网内进行查询，把包含查询结果的数据（已通过星号进行了混淆）传输到公网，显示给用户，等待时间：约15秒。 4、MySQL+PHP ——网站，接受查询需求并访问结构化数 ………………………………