学员分享-aspera踩坑记录

学员分享-aspera踩坑记录

总有一些难关,需要帮助才能跨过去,一起来看看学员的真实反馈吧!

下面是第五期生信入门学员的分享

介绍一下自己,一枚生信小白,研一在读,之前基本没有生信基础。

19年开学的时候是打算自学,偶然间发现生信技能树,然后在b站上看了生信技能树的视频,基础不够,看了一部分R语言的相关视频就没有继续看下去了。我在天津上学,一开始还想等生信技能树来天津然后报线下课,由于这次疫情的我,有机会上了线上班。我是第五期学员,现在已经是上完课的状态,虽然自己上完课了依旧很菜,但是至少让我有勇气,有底气觉得自己有一点点入门的希望,有可以让自己继续学下去的勇气。也把如此好的课程推荐给大家,生信技能树官方举办的学习班:

数据挖掘学习班第5期(线上直播3周,马拉松式陪伴,带你入门),原价4800的数据挖掘全套课程, 疫情期间半价即可抢购。生信爆款入门-第7期(线上直播4周,马拉松式陪伴,带你入门),原价9600的生信入门全套课程,疫情期间3.3折即可抢购。

在六月初开始上课,当时一度怀疑自己跟不下来,现在想想真的是没有什么干不成的事儿。哈哈哈,我竟然这么飘。小洁老师的耐心,一直在说新手犯错没关系,让我一直有勇气学下去;郭老师的Linux,让我从之前听到Linux就有点害怕学习这个,到现在大概了解了这个系统,初入门的感觉真好;张老师带我们做的转录组测序,虽然老师上课的时候我在上第二天的课的时候就已经跟不上了,我都是上完课第二天去复习,在结课的最后一天也是晕晕乎乎的结课了。

我告诉自己一定要加油,因为钉钉群授课,我们的直播互动视频都保存下来了,所以我上周开始重新复习课程,印象最深的张老师讲的课开始的目录管理,非常非常非常重要!!!我现在就在想我一开始用windows系统的时候怎么没有人教我这个,所以在一开始用电脑现在想想真的是混乱。

我想分享一下转录组测序准备工作到数据下载我踩的大坑,每次登录服务器要先激活我的小环境(时刻提醒自己),目录管理要做好,软件,数据,项目要分开。

下面主要说说我的数据下载踩的坑,多亏了张老师的帮助让我从这两天的坑中跳了出来,我是用的aspera软件下载的。

在conda下安装aspera软件

conda install-y-chcc aspera-cli

which ascp

找到要下载的数据的BioProject;一般知道它的GEO accession和SRA number就可以从GEO和SRA网站上找到。通过下面这个网站进入https://www.ebi.ac.uk/ena/browser/home

学员分享-aspera踩坑记录

img

学员分享-aspera踩坑记录

img

show selected columns

学员分享-aspera踩坑记录

img

下载它的tsv格式文件,用xftp上传到Linux自己操作的目录下面

数据下载

单个文件下载 sra格式文件和gz格式文件,这个操作是简单的,完成的很好。

代码语言:javascript代码运行次数:0运行复制

# sra格式ascp -k 1 -QT -l 300m -P33001 -i  ~/miniconda3/envs/rna/etc/asperaweb_id_dsa.openssh era-fasp@fasp.sra.ebi.ac.uk:/vol1/srr/SRR103/000/SRR1039510 ~/project/Human-16-Asthma-Trans/data/rawdata/sra# gz格式ascp -k 1 -QT -l 300m -P33001 -i  ~/miniconda3/envs/rna/etc/asperaweb_id_dsa.openssh era-fasp@fasp.sra.ebi.ac.uk:/vol1/fastq/SRR103/000/SRR1039510/SRR1039510_1.fastq.gz ~/project/Human-16-Asthma-Trans/data/rawdata/sra

批量下载(对我来说很有问题)

得到sra.url文件,如果行尾存在特殊字符,运行

sed -i "s/s*$//g" sra.url

去掉行尾特殊字符

Visual Studio IntelliCode Visual Studio IntelliCode

微软VS平台的 AI 辅助开发工具

Visual Studio IntelliCode 46 查看详情 Visual Studio IntelliCode

cat filereport_read_run_PRJNA229998_tsv.txt |awk'NR>1{print $NF}'>sra.url

这里我踩了个大坑。下载下来数据在windows下面用Excel打开了一下再上传的,由于点了每行行尾,然后在上传上去之后生成的sra.url文件每行行尾多了特殊字符,对数据下载流程即代码都不熟悉的我,开启了为时两天的踩坑。

在这里我是在后面生成sra.download.sh的时候才发现的,vim sra.download.sh,然后出现了下面这个图,我一直没有想明白怎么回事,后来在张老师的指点下,了解到时我上面写的那个问题,由于自己在windows下打开了文件并操作了一下再上传的。

学员分享-aspera踩坑记录

img

去掉了这个特殊字符以后满怀信心的本以为我可以一路畅通的做下去。

接着继续按照张老师上课的代码依据自己的目录修改了一下,去做了下面的命令最后显示的还是报错,在我挽救了一天的情况下,还是求助了张老师,最后发现

outputdir=/project/Human-16-Asthma-Trans/data/rawdata/sra

这句命令错了,错误命令(

outputdir=/project/Human-16-Asthma-Trans/data/rawdata/sra

)没有加~ 。

由于我错误的理解了绝对路径,在前几周上郭老师的课的时候Linux掌握的不好,所以在经过这次报错之后一定要好好的把郭老师的课反复听几遍并掌握。

批量下载的命令代码语言:javascript代码运行次数:0运行复制

outputdir=~/project/Human-16-Asthma-Trans/data/rawdata/sracat sra.url |while read iddoecho"ascp -k 1 -QT -l 300m -P33001 -i ~/miniconda3/envs/rna/etc/asperaweb_id_dsa.openssh era-fasp@${id} ${outputdir}"done>sra.download.sh

就成功了。

提交后台

这里需要使用nohup这个技巧,:

nohup bash sra.download.sh >sra.download.log &

数据完整性检验(非常重要!!!)得到md5值

awk 'NR>1{print

md5值检验

md5sum -c md5.txt

由于上面的命令错误,导致了md5值检验的错误,在整体改正之后出现了下面第二个图的结果。md5值检验 OK

学员分享-aspera踩坑记录

img

学员分享-aspera踩坑记录

img

希望自己以后多多踩坑,多多解决问题,在生信的道路上越走越顺利,哈哈哈。诚挚地感谢曾老师一直的鼓励,也谢谢生信技能树第五期课程上课的几位老师。

以上就是学员分享-aspera踩坑记录的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/875226.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
vscode全局替换是否影响版本控制_vscode全局替换与git版本控制关系说明
上一篇 2025年11月28日 07:07:17
excel表如何把同类内容查找出来并排序
下一篇 2025年11月28日 07:07:18

相关推荐

  • 修复Django电商项目中AJAX过滤产品列表图片不显示问题

    在Django电商项目中,当使用AJAX动态加载过滤后的产品列表时,常遇到图片无法正常显示的问题。这通常是由于前端模板中图片加载方式(如data-setbg属性结合JavaScript库)与AJAX动态内容更新机制不兼容所致。解决方案是直接在AJAX返回的HTML中使用标准的标签来渲染图片,确保浏览…

    2026年5月10日
    000
  • 怎么在PHP代码中实现图片上传功能_PHP图片上传功能实现与安全处理教程

    首先创建含enctype的HTML表单,再用PHP接收文件,检查目录、移动临时文件,验证类型与大小,生成唯一文件名,并调整php.ini限制以确保上传成功。 如果您尝试在PHP项目中添加图片上传功能,但服务器无法正确接收或保存文件,则可能是由于表单配置、文件处理逻辑或安全限制的问题。以下是实现该功能…

    2026年5月10日
    100
  • 比特币新手教程 比特币交易平台有哪些

    比特币是一种去中心化的数字货币,基于区块链技术实现点对点交易,具有匿名性、有限发行和不可篡改等特点;新手可通过交易所购买,P2P交易获得比特币,常用平台包括Binance、OKX和Huobi;交易流程包括注册账户、实名认证、绑定支付方式、充值法币并下单购买,可选择市价单或限价单;比特币存储方式有交易…

    2026年5月10日
    000
  • 修复点击时按钮抖动:CSS垂直对齐实践

    本文探讨了在Web开发中,交互式按钮(如播放/暂停按钮)在点击时发生意外垂直位移的问题。通过分析CSS样式变化对元素布局的影响,我们发现这是由于按钮不同状态下的边框样式和内边距改变,以及默认的垂直对齐行为共同作用所致。核心解决方案是利用CSS的vertical-align属性,将其设置为middle…

    2026年5月10日
    100
  • 使用 Jupyter Notebook 进行探索性数据分析

    Jupyter Notebook通过单元格实现代码与Markdown结合,支持数据导入(pandas)、清洗(fillna)、探索(matplotlib/seaborn可视化)、统计分析(describe/corr)和特征工程,便于记录与分享分析过程。 Jupyter Notebook 是进行探索性…

    2026年5月10日
    000
  • 如何在HTML中插入表单元素_HTML表单控件与输入类型使用指南

    HTML表单通过标签构建,包含action和method属性定义数据提交目标与方式,常用input类型如text、password、email等适配不同输入需求,配合label、required、placeholder提升可用性,结合textarea、select、button等控件实现完整交互,是…

    2026年5月10日
    100
  • 前端缓存策略与JavaScript存储管理

    根据数据特性选择合适的存储方式并制定清晰的读写与清理逻辑,能显著提升前端性能;合理运用Cookie、localStorage、sessionStorage、IndexedDB及Cache API,结合缓存策略与定期清理机制,可在保证用户体验的同时避免安全与性能隐患。 前端缓存和JavaScript存…

    2026年5月10日
    200
  • HTML5网页如何实现手势操作 HTML5网页移动端交互的处理技巧

    首先利用原生touch事件实现滑动判断,再通过preventDefault解决滚动冲突,接着引入Hammer.js处理复杂手势,最后通过优化点击区域、避免事件冲突和增加视觉反馈提升体验。 在移动端浏览器中,HTML5网页可以通过触摸事件实现手势操作,提升用户体验。虽然原生JavaScript提供了基…

    2026年5月10日
    000
  • Python命令怎样使用profile分析脚本性能 Python命令性能分析的基础教程

    使用Python的cProfile模块分析脚本性能最直接的方式是通过命令行执行python -m cProfile your_script.py,它会输出每个函数的调用次数、总耗时、累积耗时等关键指标,帮助定位性能瓶颈;为进一步分析,可将结果保存为文件python -m cProfile -o ou…

    2026年5月10日
    000
  • JavaScript 闭包:理解闭包原理与内存泄漏问题

    闭包是函数访问其外部作用域变量的能力,即使外部函数已执行完毕。如 inner 函数引用 outer 中的 count,形成闭包,使变量持久存在。闭包本身无害,但可能因延长变量生命周期导致内存泄漏,例如事件监听器引用大对象时。若未及时清理 DOM 事件或定时器,闭包会阻止垃圾回收,造成内存占用过高。解…

    2026年5月10日
    100
  • JavaScript 动态菜单点击高亮效果实现教程

    本教程详细介绍了如何使用 JavaScript 实现动态菜单的点击高亮功能。通过事件委托和状态管理,当用户点击菜单项时,被点击项会高亮显示(绿色),同时其他菜单项恢复默认样式(白色)。这种方法避免了不必要的DOM操作,提高了性能和代码可维护性,确保了无论点击方向如何,功能都能稳定运行。 动态菜单高亮…

    2026年5月10日
    200
  • c++如何实现UDP通信_c++基于UDP的网络通信示例

    UDP通信基于套接字实现,适用于实时性要求高的场景。1. 流程包括创建套接字、绑定地址(接收方)、发送(sendto)与接收(recvfrom)数据、关闭套接字;2. 服务端监听指定端口,接收客户端消息并回传;3. 客户端发送消息至服务端并接收响应;4. 跨平台需处理Winsock初始化与库链接,编…

    2026年5月10日
    100
  • 谷歌浏览器如何截图 谷歌浏览器页面截图技巧

    谷歌浏览器如何截图 谷歌浏览器页面截图技巧谷歌浏览器如何截图 谷歌浏览器页面截图技巧谷歌浏览器如何截图 谷歌浏览器页面截图技巧谷歌浏览器如何截图 谷歌浏览器页面截图技巧

    使用谷歌浏览器的开发者工具截图步骤:1. 按ctrl+shift+i(windows/linux)或cmd+option+i(mac)打开开发者工具。2. 点击右上角三个点,选择”更多工具”,再选择”截图”。3. 选择截取整个页面。推荐的谷歌浏览器扩展…

    2026年5月10日 用户投稿
    100
  • JavaScript函数中插入加载动画(Spinner)的正确方法

    本文旨在解决在JavaScript函数中插入加载动画(Spinner)时遇到的异步问题。通过引入async/await和Promise.all,确保在数据处理完成前后正确显示和隐藏加载动画,提升用户体验。我们将提供两种实现方案,并详细解释其原理和优势。 在Web开发中,当执行耗时操作时,显示加载动画…

    2026年5月10日
    100
  • 动态更新圆形进度条:JavaScript成绩计算器集成指南

    本文档旨在指导开发者如何将JavaScript成绩计算系统与动态圆形进度条集成,实现可视化展示平均成绩。我们将详细讲解如何修改现有的JavaScript代码,使其在计算出平均分后,能够动态更新圆形进度条的进度,从而提供更直观的用户体验。本文档包含详细的代码示例和注意事项,帮助开发者轻松实现这一功能。…

    2026年5月10日
    000
  • PHP多维数组到复杂XML结构的SOAP序列化实践

    本文旨在解决php多维数组向复杂soap xml结构序列化时遇到的“无法序列化结果”问题。通过深入理解soap xml的结构要求,包括命名空间和类型属性,文章将指导您如何构建符合特定xml schema的php关联数组。我们将利用`spatie/array-to-xml`库,详细演示其安装与使用方法…

    2026年5月10日
    000
  • JavaScript计算器开发:解决数值显示与初始化问题

    本教程深入探讨了使用JavaScript构建计算器时常见的数值显示异常问题,特别是由于类属性未初始化导致的`Cannot read properties of undefined`错误。我们将详细分析问题根源,并通过在构造函数中调用初始化方法来解决该问题,同时优化显示逻辑,确保计算器功能稳定且界面显…

    2026年5月10日
    000
  • 使用 Ajax 和 FormData 实现文件上传及文本数据提交的完整教程

    本文旨在解决在使用 Ajax 和 FormData 进行文件上传时,遇到的 $_POST 和 $_FILES 为空的问题。通过详细的代码示例和解释,我们将展示如何正确地构建 FormData 对象,并通过 Ajax 将文件和文本数据发送到服务器端,同时避免常见的错误配置,确保数据能够成功地被 PHP…

    2026年5月10日
    000
  • JavaScript 高效判断页面所有复选框状态的技巧与实践

    本文旨在提供一套高效且专业的javascript方法,用于判断网页中所有复选框的选中状态。我们将探讨如何利用`array.some()`快速确定是否有未选中的复选框(进而判断是否全部选中),以及如何使用`array.filter()`统计选中和未选中的复选框数量。通过优化dom元素选择和数组操作,提…

    2026年5月10日
    100
  • pycharm解析器怎么添加 解析器添加详细流程

    在pycharm中添加解析器的步骤包括:1) 打开pycharm并进入设置,2) 选择project interpreter,3) 点击齿轮图标并选择add,4) 选择解析器类型并配置路径,5) 点击ok完成添加。添加解析器后,选择合适的类型和版本,配置环境变量,并利用解析器的功能提高开发效率。 在…

    2026年5月10日
    000

发表回复

登录后才能评论
关注微信