Standards and Evaluation Sr.

STS Systems Support, LLC. (SSS) is seeking a Standardization and Evaluation – Senior

Requirements:

• DoDD 8570.01‐M/8140.01 I AT Level III CND
• Active TS/SCI
• Five years' experience working in the training and Standards and Evaluation shop in a USAF squadron.
• BA/BS or MA/MS

• Five (5) years of experience working in the Training and Standards & Evaluation shop in a USAF.
• Extensive knowledge with one or more of the IDS/IPS systems currently in use by the Department of Defense (DoD), Services, and Agencies (i.e., AF, Navy, Army, DC3, DISA) or Federal Government and intermediate experience in the following areas: IP addressing and domain name service; network components; Transmission Control Protocol (TCP)/User Datagram Protocol (UDP), File Transfer Protocol (FTP), Simple Mail Transfer Protocol (SMTP), and Hypertext Transfer Protocol (HTTP); and understand the network Open Systems Interconnection (OSI) model.
• Intermediate knowledge of testing/evaluation of DoD personnel.
• Extensive knowledge of MITRE ATT&CK framework, and its uses within the cybersecurity community (e.g., Open Source projects).

Duties:

• Ensure all personnel performing evaluations are certified for the function they are evaluating.
• Maintain their certification Mission Ready/Special Mission Qualification (MR/SMQ) and proficiency as evaluators in order to perform those functions as defined in AFI 17‐202 Vol 2 (Cybercrew Standardization and Evaluation) and AFI 17‐2ACD Vol 2 (Air Force Cyberspace Defense Standardization and Evaluation) 26 COG Supplement. (CDRL A001)
• Participate in the Squadron’s Stan/Eval Board (SEB), Staff Training Visit (STV), or any other type of inspection.
• Semi‐annually, prepare data for the Standardization Evaluation Board (SEB) to include all evaluations for all weapon system positions in a specified period; provide downgrade, commendable, and syllabus information; and report evaluation trends, waivers, and extensions.
• Provide data to OGV for Standardization Evaluation Board (SEB).
• 3.12.6 Maintain an up‐to‐date electronic database for all Stan/Eval required documents and functions. These documents and functions include but are not limited to; Evaluation Individual Qualification Folder(s) (EIQFs) for all MR squadron personnel, Cyber Crew Information Files (CIFs), the squadron’s monthly Letter of Certification (LOX), Go/No‐Go Status for squadron operators, written tests and scenarios for performance evaluations, plan of evaluations, and certification status dates IAW applicable regulations (including but not limited to AFI 17‐202 Vol 2, AFI 17‐2ACD Vol 2, and applicable HHQ supplements). Currently, the AFCERT uses Patriot Excalibur (PEX) to accomplish these tasks.
• Update all evaluation material as new training material is created/taught to ensure operators are tested on current processes and procedures.
• Notify crewmembers, scheduling section, and squadron leadership of upcoming and overdue testing, evaluation, and training requirements.
• Monitor testing status and results in Government management information systems, including but not limited to assisting members with extensions/waivers to established deadlines, entering test questions into electronic test databanks, reviewing evaluations, and reporting evaluation trends monthly.
• Perform testing administrator duties/function for the unit.
• Prepare training plans and assist with the satisfaction of training requirements, to include permanent party faculty upgrade, development, currency, and qualification close‐out. (CDRL A004)
• Update training and readiness status of squadron personnel.
• Conduct monthly reviews of assigned/attached crew member evaluation dates and provide updates on completion progress.
• Assist personnel assigned to Stan/Eval shops to help track training and readiness status of squadron personnel and attend meetings for training programs.
• Create and document metrics for reporting and analysis to improve weapon system processes and mission execution. (CDRL A004 and A009)
• Notify and coordinate with ACD Weapon System instructors and evaluators when the database needs to be updated.
• Update all applicable database fields, functions, and documentation as new functions and materials are assigned or created to ensure Stan/Eval requirements are met IAW applicable regulations. (CDRL A004)
• Provide monthly metrics/reports on the status of the AFCERT Stan/Eval Program. These reports include but are not limited to: How many operators have not been through a SPOT eval, how many operators need to complete an instructor eval, which operators are approaching, currently in, or overdue for a periodic qualification, the number of instructors and evaluators within each crew position, and other metrics/reports deemed necessary by the Chief of Stan/Eval. (CDRL A009)
• Maintain the AFCERT’s Operational Processes and the operations checklist library.
• Perform as the squadron focal point for the review and update of operational processes/checklists.
• Coordinate with operational POCs/Subject Matter Experts (SMEs) when a process/checklist needs to be updated. (CDRL A004)
• Provide OJT to other contractor employees, military, and/or civilian personnel, and ensure continuity folders/working aids are updated at least once per quarter in order to ensure efficient transition when personnel rotate.
• Ensure new processes/checklists are interim approved by Flight leadership with no more than a 5% error rate.
• Hold a Cyber Operations Panel/Operational Review Panel (COP/ORP) for new checklists and processes. COP/ORP shall be held as needed, but a minimum of quarterly IOT discuss/coordinate the approval of operational process/checklist changes.
• Document proceedings of the COP/ORP and track the status of checklist changes and updates. (CDRL A004)