这里是黄永亮的博客

标签 edx 下的文章

CDH5分布式运行任务的各种坑(更新ing)

# CDH搭建、配置(待填坑) # 角色分配设计(待填坑) # 参数调优(待填坑) 因为要把edX中Insight的数据导入到一个6节点集群中做运算,所以尝试分离pipline,远程执行分析任务。具体过程有时间另写文章分析(先挖个坑)=-= 今天发现luigi调度任务的时候把任务挂起后就不动了,最开始怀疑luigi配置问题,按官方文档修改metastore_host和metastore_port均无效 但是CDH的监控显示hive的Server正常运行,查看日志也没看到输出错误,然后我查看了task的源码发现需要从hive中查询数据,所以怀疑hive配置有问题, hive配置文件由/etc/hive/conf指 ...

CAS对接Open edX

Open edX的第三方登录是作为一个django app存在的,配置过程如下。 LMS配置过程 ##安装CAS的Client、Mapper 进入edXapp环境,下载CAS的Client、Mapper C 0123456  sudo su edxapp -s /bin/bashcd ~source edxapp_envpip install git+https://github.com/kstateome/django-caspip install git+https://github.com/eduStack/neusoft_cas_mapper  CAS Client安装目录在下面的地址 C ...