大数据链路
1. 数据链路层的主要任务是什么网络层的主要功能有哪些
1、数据链路层功能
在两个网络实体之间提供数据链路连接的创建、维持和释放管理。构成数据链路数据单元（frame：数据帧或讯框），并对帧定界、同步、收发顺序的控制。传输过程中的网络流量控制、差错检测和差错控制等方面。
只提供导线的一端到另一端的数据传输。数据链路层会在 frame 尾端置放检查码（parity，sum，CRC）以检查实质内容，将物理层提供的可能出错的物理连接改造成逻辑上无差错的数据链路，并对物理层的原始数据进行数据封装。
2、网络层的主要功能
对网络层而言使用IP地址来唯一标识互联网上的设备，网络层依靠IP地址进行相互通信（类似于数据链路层的MAC地址），详细的编址方案参见IPv4和IPv6。
(1)大数据链路扩展阅读
设计数据链路层的原因
1、在原始的物理线路上传输数据信号是有差错的。
2、设计数据链路层的主要目的就是在原始的、有差错的物理传输线路的基础上，采取差错检测、差错控制与流量控制等方法，将有差错的物理线路改进成逻辑上无差错的数据链路，向网络层提供高质量的服务。
3、从网络参考模型的角度看，物理层之上的各层都有改善数据传输质量的责任，数据链路层是最重要的一层。
2. 数据链路层的主要功能
数据链路层要完成许多特定的功能。这些功能包括为网络层提供设计良好的服务接口，处理帧同步，处理传输差错，调整帧的流速，不至于使慢速接收方被快速发送方淹没。 数据链路层的功能是为网络层提供服务。其基本服务是将源机器中来自网络层的数据传输给目的机器的网络层。
数据链路层一般都提供3种基本服务，即无确认的无连接服务、有确认的无连接服务、有确认 的面向连接的服务。（1）无确认的无连接服务
无确认的无连接服务是源机器向目的机器发送独立的帧，而目的机器对收到的帧不作确认。如果由于线路上的噪声而造成帧丢失，数据链路层不作努力去恢复它，恢 复工作留给上层去完成。这类服务适用于误码率很低的情况，也适用于像语音之类的实时传输，实时传输情况下有时数据延误比数据损坏影响更严重。大多数局域网 在数据链路层都使用无确认的无连接服务。
（2）有确认的无连接服务
这种服务仍然不建立连接，但是所发送的每一帧都进行单独确认。以这种方式，发送方就会知道帧是否正确地到达。如果在某个确定的时间间隔内，帧没有到达，就必须重新发此帧。
（3）有确认的面向连接的服务
采用这种服务，源机器和目的机器在传递任何数据之前，先建立一条连接。在这条连接上所发送的每一帧都被编上号，数据链路层保证所发送的每一帧都确实已收 到。而且，它保证每帧只收到一次，所有的帧都是按正确顺序收到的。面向连接的服务为网络进程间提供了可靠地传送比特流的服务。
2．帧同步
在数据链路层，数据的传送单位是帧。所谓帧，是指从物理层送来的比特流信息按照一 定的格式进行分割后形成的若干个信息块。数据一帧一帧地传送，就可以在出现差错时，将有差错的帧再重传一次，从而避免了将全部数据都重传。
帧同步是指接收方应当能从收到的比特流中准确地区分出一帧的开始和结束在什么地方。
3．差错控制
传送帧时可能出现的差错有：位出错，帧丢失，帧重复，帧顺序错。
位 出错的分布规律及出错位的数量很难限制在预定的简单模式中，一般采用漏检率及其微小的CRC检错码再加上反馈重传的方法来解决。为了保证可靠传送，常采用 的方法是向数据发送方提供有关接收方接收情况的反馈信息。一个否定性确认意味着发生了某种差错，相应的帧必须被重传。这种做法即是反馈重传。
更复杂的情况是，一个帧可能完全丢失（比如，消失在突发性噪声中）。在这种情况下，发送方将会永远等下去。
这个问题可以通过在数据链路层中引入计时器来解决。
3. 数据驱动全链路啥意思
而要做到数据驱动，需要去做大量的数据分析以及大量的数据报表开发。在整个数据分析链路上，存在一些研发痛点：
BI资源紧张、响应较慢
SQL 查询速度慢、等待耗时较长
前端与服务端的联调成本较高
数据类型复杂度高，难以直观发现有价值的信息
业务现状
数据分析的现状流程分为三个部分
SQL 开发
应用开发
数据可视化、前台产出分析报告
完成一整个开发流程，平均耗时要达到 5 天甚至以上。我们一步一步地来看看，每一个研发节点在现阶段存在的问题，以及能不能去优化和解决它们。
SQL 开发
负责 SQL 开发的同学工种是 BI，由于BI缺乏工程抽象的概念，导致每个数据开发的需求过来的时候，都需要从 0~1 重新开发 SQL 代码，但绝大部分数据分析需求的基本逻辑是相似的，没有可复用性，使整体效率变得特别低。那我能不能在 SQL 的领域增加工程抽象的概念呢？我把 SQL 抽象成一个一个的原子 SQL，前台只需要指定原则 SQL 的拼装规则，拼装层对原子 SQL 进行组装得到最终的SQL查询字符串，进而就得到了想要的查询结果，通过这样，重复的 SQL 能被沉淀和复用，大大减少了重复开发的时间成本。另外，因为 SQL 查询的数据量达到亿级以上，每次请求的耗时等待需要几十分钟甚至以上，用户体验非常差，拉低了分析问题的效率，我们的预期是能够把几十分钟的耗时等待缩短到秒级，目前阿里云推出的一个产品是分析型数据库，它能够满足大数据计算场景下秒级返回查询结果，我们可以直接拿过来用。
4. 在无噪声情况下，关于通信链路的最大数据传输速率的问题，具体如下
通信链路的带宽W=6kHz；采用4个相位，每个相位具有4种振幅的QAM调制技术，则信号状态个数共有4；44=16种。在无噪声情况下，根据奈奎斯特准则可得该通信链路的最 大 数 据 传输速率即氏。。：2W109，N：2x6x103 xl092 16=12x103 x4=48x103 bps=48kbps。
所以通信链路的最大数据传输速率是48Kbps
5. 网络层、数据链路层和物理层传输数据单位分别是（）
A是错误的。
因为在网络传输中，报文是具有完整意义的二进制数据整体；报文在传输层被拆分成较小的可传输的数据单元，并添加头部，形成包，到达网络层后再次被添加头部形成新的包。
这样做的目的是，当数据经过网络节点时，在这里添加目的地址与源地址，包在到达数据链路层后被封装成帧，最后才是物理层的比特，
所以C才是对的，分别是包、帧、比特的单位；因为这是层层分割，层层传递的一个关系。
网络层：数据包（packet）——数据链路层：数据帧（frame）——物理层：比特流（bit）。
(5)大数据链路扩展阅读
在电子学领域里，表带宽是用来描述频带宽度的。
但是在数字传输方面，也常用带宽来衡量传输数据的能力。
用它来表示单位时间内（一般以“秒”为单位）传输数据容量的大小，表示吞吐数据的能力。
这也意味着，宽的带宽每秒钟可以传输更多的数据。
所以我们一般也将“带宽”称为“数据传输率”（硬盘的数据传输率是衡量硬盘速度的一个重要参数）。
6. 数据链路的Link系列数据链路
7.1 Link11数据链路
Link 11是70年代投入使用的，用于舰船之间、舰船与飞机之间、舰队与海军陆战队之间、舰队与陆地之间的双向情报交换，主要产品是Link 11A/B。装备Link 11的有美国海军航母、巡洋舰、驱逐舰、两栖战舰，E-2C、E-3预警机，S-3A、P-3C反潜飞机等。
美国军用标准MIL—STD—188—203—1说明了11号链的详细情况。Link 11数据链是一种自动、高速、计算机对计算机的通信系统，采用TADIL A型数据格式，在具有Link 11功能的各单元，如海上舰艇、飞机和岸上节点之间进行敌情报告等战术数据的交换。此外，它还可用于协调作战区域内各个平台的作战行动。Link 11采用轮询技术，通常由计算机、通信保密设备、数据终端、高频或特高频无线电台组成。Link 11 主要采用高频传播，标准传输速率为1200bps。但在视距范围内可使用特高频频段实现各种作战平台的互连，标准传输速率为2400bps。Link 11 系统主要装备于那些能处理并显示作战态势及目标信息的平台。目前，美国及其盟国都装备有该数据链。
7.2 Link16数据链路
Link 16 于80年代问世，通信容量、抗干扰力和抗毁性大大提高，应用范围从单一军种扩展为三军通用。Link16是美国和北约部队广泛采用的一种具有扩频、跳频抗干扰能力的战术数据链，也是美军用于指挥、控制和情报的主要战术数据链，具有通信、导航和敌我识别能力，可提供重要的联合互通能力和态势感知信息，主要装备美海军战舰、空军战斗机、预警机以及陆军防御系统等。此数据链是使用最普遍的态势感知数据链。它是一种先进的通信、导航与识别系统，采用战术数字信息链（TADIL）J型数据格式，是美军根据未来作战的需要并充分发挥联合战术信息分发系统（JTIDS）的能力而研制的，具有快速、机动、无线、多用户等特点，现已成为美国国防部最常用的战术数据链之一。16号链支持战斗群各分队之间的综合通信、导航和敌我识别，用于联合战术信息分配系统。战术数据信息数据链J一般用于把参战的部队互连起来。例如，把海上部队、飞机和岸节点互连起来。它用于交换联合战术数据，使用具有抗干扰能力的特高频无线电设备。
Link 16终端包括联合战术信息分发系统(JTIDS)终端和多功能信息分发系统(MIDS)两代产品。MIDS虽是新型终端，但与JTRS以及“软件通信体系结构”(SCA)不兼容，因此，美国JTRS计划已增加新的波形，如2007年开始生产并交付与JTRS兼容的MIDS终端。其中，机载Link 16 系统通常由任务计算机、JTIDS 终端或其后继者多功能信息分发系统（MIDS）终端和天线组成。JTIDS/MIDS是Link 16所独有的设施，它除了可以给Link 16系统提供信息加密、自动入网以及把加密信息高速分发给需要该信息的用户的功能之外，还可以将需要中继的信息自动、高速地转发出去。
Link 16数据链是在Link 11数据链的基础上研发的，可以与Link 11或Link 4A互操作，标准传输速率为28.8Kbps～238Kbps。Link 16的核心是时分多址(TDMA)技术。TDMA技术能实现数百个用户共享并同时使用一个无线电网络，而且不会相互干扰。该网络的每个成员都分配有一个持续数分之一秒的时隙。例如，当战斗机上的终端自动、定期发送飞机状态信息时，信息被加密并被分割为数个数据片段，然后这些片段被混合插入所分配的时隙，并以短脉冲群的方式进行发送。接收终端接收到这些数据片段后对其重新组合、解码，就可以获取完整、准确的信息。目前，Link 16已装备在美国、北约和日本等国的多种平台上。
7.3 Link22数据链路
Link 22是北约国家共同开发，用以取代Link 11的下一代数据链系统，也称北约改进型Link 11。它是一种保密、抗干扰的超视距战术通信系统，主要应用于海上舰队，可在陆地、水上、水下、空中或太空各平台之间，进行电子战数据交换以及指挥控制指令与情报信息传递。为了在信息格式上与Link 16兼容，Link 22采用了由Link 16衍生的信息标准以及Link16的结构和协议。Link 22与Link 16一样也是采用TDMA技术，在高频和超高频频段采用跳频模式以提高抗干扰能力，通过情报自动化网络管理技术提供更好、更优异的性能按计划Link 22将在2015年前取代Link 11。
7. 数据链路层的工作原理是怎样的
数据链路层最重要的作用就是：通过一些数据链路层协议(即链路控制规程)，在不太可靠的物理链路上实现可靠的数据传输。
工作原理：
1．链路管理：当网络中的两个结点要进行通信时，数据的发方必须确知收方是否已经处在准备接收的状态。为此，通信的双方必须先要交换一些必要的信息。或者用我们的术语，必须先建立一条数据链路。同样地，在传输数据时要维持数据链路，而在通信完毕时要释放数据链路。数据链路的建立、维持和释放就叫做链路管理。
2．帧同步：在数据链路层，数据的传送单位是帧。数据一帧一帧地传送，就可以在出现差错时，将有差错的帧再重传一次，而避免了将全部数据都进行重传。帧同步指的是收方如何从收到的比特流中准确地区分出一帧的开始和结束。
3．流量控制：发方发送数据的速率必须使收方来得及接收。当收方来不及接收时，就必须及时控制发方发送数据的速率。
4．差错控制：在计算机通信中，一般都要求有极低的比特差错率。为此，广泛地采用了编码技术。编码技术有两大类。一类是前向纠错，即收方收到有差错的数据帧时，能够自动将差错改正过来。这种方法的开销较大，不适合于计算机通信。另一类是检错重发，即收方可以检测出收到的帧中有差错(但并不知道是哪几个比特错了)。于是就让发方重复发送这一帧，直到收方正确收到这一帧为止。这种方法在计算机通信中是最常用的。本章所要讨论的协议，都是采用检错重发这种差错控制方法。为了防止发送方等待收方应答时出现等待死锁，还将提供超时控制机制。重发帧后，为了防止收方收到重复帧，通常为帧给定一个帧序号。
5．区分数据和控制信息：由于数据和控制信息都是在同一信道中传送，而在许多情况下，数据和控制信息处于同一帧中。因此一定要有相应的措施使收方能够将它们区分开来。
6．透明传输：简单的说，透明传输就是发送方发送什么的数据，不管数据传输过程是如何实现的接收方将收到什么样的数据。更确切地说，所谓透明传输就是不管所传数据是什么样的比特组合，都应当能够在链路上传送。当所传数据中的比特组合恰巧出现了与某一个控制信息完全一样时，必须采取适当的措施，使收方不会将这样的数据误认为是某种控制信息。这样才能保证数据链路层的传输的透明的。
7．寻址：在多点连接的情况下，必须保证每一帧都能送到正确的目的站。收方也应当知道发方是哪一个站。
8. 计算机网络里面的链路是什么，
什么是链路层劫持
数据链路层处在OSI模型的第二层，它控制网络层与物理层之间的通信。数据链路层定义了如何让格式化数据以进行传输，以及如何让控制对物理介质的访问。它的主要功能是如何在不可靠的物理线路上进行数据的可靠传递，还提供错误检测和纠正，以确保数据的可靠传输。该层的作用包括：物理地址寻址、数据的成帧、流量控制、数据的检错、重发等。
链路层劫持是指第三方（可能是运营商、黑客）通过在用户至服务器之间，植入恶意设备或者控制网络设备的手段，侦听或篡改用户和服务器之间的数据，达到窃取用户重要数据（包括用户密码，用户身份数据等等）的目的。链路层劫持最明显的危害就是帐号、密码被窃取。
二、链路劫持案例分析
以下引用红黑联盟站内一项案例分析，说明链路劫持的现象。
案例现象描述：
有用户反馈访问公司部分业务的URL时被重定向至公司其他业务的URL，导致用户无法请求所需的服务，严重影响了用户体验以及用户利益。我们第一时间通过远控的方式复现了上述现象，并及时抓取了相关数据包以供分析，当然前期也采取了用户电脑杀毒、开发者工具分析等方式排除了用户端个人原因的可能性。从图1来看，初步判断是运营商某员工所为，意欲通过流量重定向来获取非法的流量分成，啥意思呢，被劫持的该业务的流量要经过联盟的该账户spm，使得公司再付费给联盟，归根结底还是为了盈利。
案例问题追踪：
通过分析抓取的样本数据发现，数据包在传输过程中出现异常TTL，目标机的正常TTL为51如图2。