Project256

用了五年JAVA，学了一堆奇技淫巧，但好像一直没有涉足手动排查的技术。最近偶然看了一本《服务端开发：技术、方法与使用解决方案》，虽然这本书对于A公司员工没啥太大启发性，由于每天都在用书中所述的中间件、技术、稳定性组件、设计方案，因此就算是一个字一个字地看，也在一个下午看完了。不过其中有一段对JAVA线程问题排查部分还是我的技术空白，所以简单实践并记录一下。 第一步：top 能看到CPU使用率... 阅读全文…

今天顶着巨冷的天去咖啡馆看看书，只有每周末去咖啡馆的时光才能给“颓废”的周末休闲时光扳回一城。毕竟咖啡馆没有床，不打开电脑或是看看书总感觉和周围格格不入。 除了感受咖啡厅的BGM以外，嘈杂的人声就像是集中精神的环境音。当然有时候也会把注意力不小心集中到其他人的对话中，今天的topic就是某段对话的所思所想，有关于公寓老板培训新下属的对话。 公寓老板在简单介绍了工作职责范围之后，分享了如何留存... 阅读全文…

由于笔者近期家中老人离世，需要大量的自我疗愈和思考，因此断更了几周。悲伤到麻木的同时，也对生命有了更多的思考，因此记录一下。 感谢父母对老人的悉心照顾，让老人体面、有尊严的离开。 庆幸在离世前一周好好地陪老人聊聊天、说说话，平静地讨论生命和死亡，握手道别。 我习惯性地对所有事物存档、备份，主要是我比较喜欢时空穿梭式地回忆，留个念想对于我而言无比重要。 虽然父母不建议我翻看老人卧室和客厅的监护... 阅读全文…

Topic祝各位亲们中秋&国庆假期快乐~ 由于大模型训练时间太长，还氪了一堆金心态爆炸，随便碎碎念闲聊闲聊。 今天的话题一方面是如何在职场建立差异化、一方面是求职还是读研。 如何在职场建立差异化笔者所在的A公司刚完成述职，其实大家做的工作都差不多，做工程的要么重构、要么迭代、要么CRUD堆功能。抛去晋升、人际关系等非可控要素，老大如何将不同等级绩效分配至各个手下呢？ 通过观察和实践高... 阅读全文…

禁用词处理在测试过程中，发现经常在对话中出现「……」的情况，经过分析剧本中有至少2K个类似回复。尽管此类回复配合CG图像能够从侧面表现人物心态的作用，但在AIGC工作中需要正面回答的回复。因此需要将剧本中相关字符去除，类似的还有***符号等。 ... 阅读全文…

背景近期服务器无法访问HuggingFace，而且我想薅免费羊毛，因此在服务器上部署了命令行式SSR。 但明明配置完毕，就是不能curl和git clone https协议的地址。就像终点就在眼前，但前方有一堵空气墙挡着。 ... 阅读全文…

准备微调书接上回，已经把CLANNAD剧本进行解析，并处理为LLaMA能够微调的JSON文件，接下来就开始实际操作LLaMA的微调工作。 由于微调需要的资源比较多，而且可能要花好几个小时，不可避免退出Colab标签页，因此化身氪金玩家转战AutoDL。 转战AutoDL的部分原因也有训练速度要比Colab快一些，5月份时曾经训练个狗脸识别模型，AutoDL的训练速度要完爆Colab。果然是人... 阅读全文…

准备微调数据今天计划完成如下目标： 读取文件 统计数据 清洗数据 构造微调JSON 尝试微调LLaMA大模型 代码和运行结果放在Github中 解析角色发言由于Java是我每天吃饭用的工具，虽然Python很香，但我选Java。毕竟准备微调数据JSON是一次性工作，不参与模型训练中，所以直接用比较顺手的工具解析并构造即可。 首先定义两个核心数据类，第一个是角色发言，每个对象存储角色名称以... 阅读全文…

今日工作读大佬翻译的Paper：[论文] LLaMA 2：开放基础和微调聊天模型 这位携程大佬中英双语，还翻译了一堆大模型相关论文，respect。 Huggingface由于某些神奇的力量，无法git clone，因此只能用Colab或是国内能够学术加速的研发平台。（无法用公司内部的机器……十分难受） 部署部署其实很简单，但硬件要求比较高。根据项目说明中的Colab部署方法，就能快速启动一... 阅读全文…

序章三年前我启动了一个项目，名叫CLANNAD_LSTM，计划使用LSTM续写CLANNAD剧本。 当时刚上完研一下学期的CV及NLP相关课程，相比于研一上学期倾向于数学推理教学人工智能，我更喜欢研一下学期在工程实践中学习人工智能相关技术。由于疫情原因，研一下学期可以晚上加班+录课，早上补课，半夜再写作业，忙得不亦乐乎。当然之前的学校回忆再开一篇也来得及，总之是非常充实，甚至充实到开多线程都... 阅读全文…